Die Herren von Berge (Lehnsherren des Grafen von Galen) gab es nachweislich schon im 13. Jahrhundert, derer der Ort seinen Namen verdankt. Die Orte Niederberge, Mittelberge und Oberberge waren lange Zeit eigenständig, bis sie sich zu der Dorfgemeinschaft Berge zusammen schlossen.

Die Pfarrkirche St. Lucia, mit Standort in Mittelberge, bildet das Herzstück des Ortes. Sehenswert heute noch sind: die Luzia-Kapelle in Oberberge, das ehemalige Gut Berge, die Burgruine Wallenstein, das wunderschöne Fachwerkhaus Berghoff und der neue Dorfplatz.