Les origines des premières fortifications remonteraient au VIIIe siècle.
Il fut immortalisé par Godefroid, chef de la première croisade (1096) et avoué du Saint Sépulcre qui engagea le château auprès de l'archevêché de Liège pour financer son expédition en Terre Sainte.
Enfin, il connaîtra, sous les guerres de Louis XIV, de grands travaux d'aménagements réalisés par Vauban et sera occupé militairement jusqu'en 1830.