Графы Берга сформировались в 1101 году, являясь младшей линией династии Эццоненов, которые вели родословную со времён Лотарингского королевства. В этом веке они стали самыми могущественными властителями в нижнерейнском регионе. В 1160 году территория графства была разделена на 2 части, одна из которых впоследствии стала графством Марк, но она возвратилась его правителям в 16 веке.
После того, как династия Нойбурга прекратила своё существование, Берг сначала был под властью рейнских пфальцграфов, а с их пресечением в 1777 году — под покровительством Баварии.
Французская оккупация 1794—1801 годов и аннексия в 1801 году Юлиха в ходе французских революционных войн отделила Юлих и Берг от баварских владений, и они попали под управление младшей династии Виттельсбахов.
В 1815 году по решению Венского конгресса, Берг вошёл в состав прусской провинции Юлих-Клеве-Берг, которая в 1822 году была объединена с провинцией Рейн.