Die Burg Berg ist der Nachfolgebau einer früher weit unterhalb existierenden Burg, die von den Normannen gestürmt wurde. Die Burg Berg wurde dann zwischen dem 12. und 14. Jahrhundert gebaut. Sie war damals eine Wasserburg, doch die Gräben wurden bereits im 18. Jahrhundert beseitigt. Um 1900 musste die Vorburg wegen eines Brandes fast komplett erneuert werden.