En 1974, le célèbre architecte Fernand Pouillon (1912-1986) fait l’acquisition de la forteresse en ruines et en entreprend la restauration complète. Vers 1980, il fait placer dans la plupart des fenêtres des fragments de vitraux anciens achetés dans le commerce d’art, soit 86 pièces. La collection compte quelques rondels et surtout de nombreux éléments de verrières monumentales du XIIIe au XVIIe siècle plus ou moins bien conservés, fragments d’œuvres coupées de leurs lieux d’origine, dont la fonction est devenue purement décorative. Ces vitraux dispersés dans les différentes salles du monument sont remontés au milieu de losanges.