Les Saint-Gily apparaissent à Péchaurié dès la fin du 13e siècle, tenant de l'évêque de Cahors la seigneurie qui ne comprend en fait que le château et ses dépendances immédiates. Un document de 1462 décrit le repaire avec des "hostals", la tour, une mouline, un étang, un moulin à blé et une métairie, le tout d'un seul tenant (J. Lartigaut, 1961). En 1504, Jean de Saint-Gily est seigneur "direct" de Péchaurié (L. d'Alauzier, 1984), mais sans aucune justice.£Pris en 1344 par Bertrand de Pestilhac et Philippe de Jean, le château est livré aux troupes du duc d'Aquitaine qui l'occupent jusqu'à son rachat en 1351 par Jean de Saint-Gily : il subit alors des dégâts importants. Il est de nouveau pris et en partie démoli en 1562, pendant les guerres de Religion. Par le mariage de Françoise de Saint-Gily en 1670, la seigneurie passe aux Vassal (C. Didon, 1996). En 1780, alors que Bertrand de Vassal y habite, le château et ses dépendances sont dans un état général de délabrement, avec des murs effondrés ou qui menacent, excepté la "chambre neuve" (F. Auricoste, 1990). Au début du 20e siècle, le dernier des Vassal fait don du château à la commune qui installe une école dans la chapelle ; le château lui-même est inhabité et il est en ruines quand il est acheté en 1978, son nouveau propriétaire s'employant alors à le restaurer (C. Didon, 1996). Des vestiges subsistent du château du 13e ou 14e siècle, et l'édifice portent les marques d'une reconstruction réalisée après la guerre de Cent ans : des peintures subsistent de cette époque (d'après C. Didon). La chapelle, qui daterait de 1618 (C. Didon, 1996) a été presqu'entièrement reconstruite en 1837.