Marie-Emmanuelle Desmoulins, dans le dossier de proposition d'extension de protection présenté à la Commission Régionale du Patrimoine et des Sites en 2015 (op. cit.) indique que Pierre II d'Albignac s'installe à Peyreleau vers 1740, au lieu-dit du Triadou, confiscant les terres du prieuré bénédiction du Rozier. Neuf ans plus tard, il épouse Flore de Capluc, qui hérite des biens de son frère Louis. Entre 1481 et 1501, plusieurs actes attestent de la résidence de Pierre d'Albignac au château dont la partie orientale, dite Vieux Triadou, pourrait avoir été édifiée à cette période. En 1544, on signale une ""mayso situada en lo vielh castel de Peyreleau"", ce qui laisse supposer qu'une nouvelle demeure existait alors.£Le château est alors la résidence de Simon d'Albignac, petit-fils de Pierre II. Né vers 1557-1558, ce fervent catholique participe aux guerres de Religion. En 1589, il fait prisonnier et rançonne le chef protestant Jean de Castelpers, vicomte de Panat. Au début du 17e siècle, il existe une chapelle dans le chateau dans laquelle Simon d'Albignac demande aux prêtres du Rozier de célébrer à perpétuité une messe par semaine moyennant une rente de 100 livres (testament de 1614). En 1617, il fait construire une tour carrée ""de même hauteru et largeur qu'est la tour que le même maçon a faite aud. Seigneur du Triadou moyennant 300 livres 25 setiers blé/seigle et orge, 2 muids de vin et marchant"". Onze ans plus tard, en 1628, il défait les troupes protestantes du Duc de Rohan et la tradition locale explique qu'il se serait emparé d'une partie de leur trésor de guerre. Cela lui aurait permis d'embellir sa demeure et à son fils de poursuivre ces travaux.£Son fils fait de riches alliances et enrichit le domaine, il épouse, en 1628, Jeanne de Solages et annexe la baronnie de Castelnau puis, en seconde noce, Isabeau du Fecs de Sumène en 1650. Leur fils, Jean-François d'Albignac, qui réside sur place, prend le titre de marquis et fait bâtir une nouvelle chapelle en 1669, dédiée à la Vierge et dont les murs étaient couverts de fresques représentant les scènes de la vie de la Vierge.£Vendu en 1795 comme bien d'émigrés, les bâtiments sont adjugés à 7 nouveeaux propriétaires pour 12.500 livres. Un portail est construit en 1810 entre la magnanerie et la grange dîmière et dans la seconde moitié du 19e siècle des baies à meneaux sur la façade est et nord de la parcelle 359 sont aménagées par le propriétaire qui fait installer un escalier intérieur afin de pouvoir distribuer cette partie de l'édifice.£Le château abrite la mairie et une étude notariale à la fin du 19e siècle. En 1917, le mur est de la tour nord-est s'effondre faute d'entretien. En mai 1944 la chapelle et la balustrade voisine font l'objet d'une inscription à l'inventaire supplémentaire des monuments historiques. Les fresques sont alors signalées comme en mauvais état. Le château est racheté en 1964 par une héritière de la famille d'Albignac qui entame des travaux de restauration un peu brutaux et demande quelques années plus tard une extension de protection. L'architecte des bâtiments de France Fonquernie émet un voeu de classement en totalité du château à l'exception de la partie sud, où les travaux réalisés sans autorisation, avaient altéré la valeur patrimoniale de la demeure.£Diverses reprises et réparations sont effectuées dans les années 1990 sous le contrôle de l'architecte des bâtiments de France et des panneaux peints sur bois furent découverts en 2000 sous un papier peint. Cela motiva une nouvelle proposition d'extension de protection qui aboutit en mars 2015.