La terre de Crégols est donnée en 1210 par Fortanier de Gourdon à un Carbonnel dont la famille prend le nom du lieu : un Hector de Crégols teste en 1286 ; la famille est apparentée aux Hébrard de Saint-Sulpice, et plusieurs de ses membres se trouvent à leurs côtés à l'évêché de Coïmbre à la fin du 13e siècle et au début du 14e siècle. En 1504, la seigneurie appartient par moitié à Antoine de Malroux, garde de la monnaie royale de Villefranche-de-Rouergue, et à noble Marguerite de Saint-Amans, veuve de Pierre Durieu, qui l'ont achetée à réméré à monsieur de Puycornet (L. d'Alauzier, 1984). A une date inconnue, le domaine passe dans les biens des chartreux de Cahors, et il est vendu comme Bien national en 1791 (C. Didon, 1996).£L'édifice actuel résulte d'une importante reconstruction, peut-être en plusieurs phases dont une probablement au 17e siècle, sur les vestiges d'un état plus ancien qui peut dater du 14e ou du 15e siècle.