En 1296, Benoît de Jean acquiert du sénéchal de Quercy la moitié indivise de la borie ou repaire de Galessie. En 1318, ses successeurs possèdent toute la justice du lieu. Le repaire occupé par les routiers de Philippe de Jean et d'Adhemar d'Ussel en 1369 fut pris en 1374 par les cadurciens. En 1454, il est dit vacant de longue date. En 1504, noble Sicarde de Tustal, alias de Ricard, femme de Jean Druilhe, dénombre pour la moitié de Galessie, l'autre moitié étant au collège de Pélegry de Cahors (L. d'Alauzier, 1985).
Un château appartenant à Gilibert de Tustal serait attesté au milieu du 16e siècle, dont un inventaire de la fin du 17e siècle donnerait une description complète, alors qu'il appartient aux Vilars de Ricard. La seigneurie passe en 1710, par alliance, à Antoine de Peyronnenc de La roque de Saint-Chamarand, qui la vend en 1738 aux Deslax d'Arcambal (C. Didon, 1996).
Les bases de la tour et du logis, édifiées en moellons équarris, peuvent remonter au 13e siècle. Les terrasses édifiées en briques paraissent un peu plus récentes mais peuvent appartenir également à l'époque médiévale.
