1326

Erstmals als Steinernes Haus im Zusammenhang mit einer Marienkapelle erwähnt.

1345 - 48

Neubau der Burg unter den Edelherr Bernhard V. zur Lippe.

1656 - 59

Umbau durch Graf Hermann Adolf mit repräsentativem barockem Treppenhaus, Portal und Schweifhaube.

Ursprünglich als herrschaftliche Residenz benutzt, wurde die Burg später auch als Witwensitz, Amtshaus, Kornspeicher und als Amtsgefängnis genutzt.
Danach Verfall und Abbruch des Turmes (1775/1798 und des 3. Obergeschosses (1858).
1983-89 in 3 Bauabschnitten saniert, dabei wurde auch der Bergfried auf den noch vorhandenen Grundmauern neu errichtet.

(Quelle: Hinweistafel an der Burg)