G. Lacoste (1884) supposait que Lavercantière avait fait partie des places prises par Richard Coeur-de-Lion en 1188. La seigneurie appartenait aux Gourdon, qui, en 1401, l'avaient "autrefois" donnée au chapitre de la cathédrale de Cahors : en 1411, Pons de Gourdon rend hommage au chapitre de Cahors pour Lavercantière et autres lieux (G. Lacoste, 1885). En 1504, c'est Agnet de Gourdon qui est seigneur de Lavercantière (L. d'Alauzier, 1985). La seigneurie passe ensuite aux Lagrange, par le mariage, en 1528, de Michel de Lagrange et de Marquèse de Gourdon, unique héritière de Jean de Gourdon (G. Lacoste, 1886). Les Lagrange-Gourdon se maintiennent dans les lieux jusqu'à la Révolution.£Sous la réserve d'une étude de l'édifice, le château ne paraît pas conserver de vestiges antérieurs au 13e siècle : à première vue, l'état le plus ancien serait datable du 13e ou du 14e siècle. Seule une porte ornée d'une accolade témoigne encore de travaux réalisés après la guerre de Cent ans. Le corps principal est entièrement réaménagé, en conservant partie des maçonneries médiévales, vers 1659, date du contrat passé par Guillaume (ou Guyon) de Lagrange-Gourdon avec le maçon Pierre Francès pour les marches de l'escalier (M. Escat, B. Tollon, 1978). Les travaux sont interrompus, sans que l'on en connaisse la raison, et ce n'est qu'au 18e siècle, d'après la forme des fenêtres, que le corps de bâtiment ouest fait à son tour l'objet d'un réaménagement complet. Les bâtiments qui entouraient la cour, et qui figurent encore sur le plan cadastral de 1810, ne subsistent plus aujourd'hui qu'à l'état de vestiges.