Château seigneurial acquis par Jacques Lefranc, premier président à la Cour des Aides et Finances de Montauban, au début du XVIIIe siècle. Leur fils Jean-Jacques accumule les plus hautes charges de la magistrature à la Cour des Aides de Montauban. Après une période parisienne orientée vers la littérature (réception à l'Académie française), il revient définitivement à Pompignan. Il acquiert en 1763 le titre de marquis. Le marquis de Pompignan se consacre entre 1745 et 1780 à une première campagne de travaux sur le domaine, véritable ensemble communautaire déclinant : château, dépendances et parc, maison rustique, deux églises, presbytère, maisons de paysans, maison religieuse, espace public pour les marchés. A la mort de Jean-Jacques en 1784, son fils Jean-Georges-Louis-Marie entreprend une deuxième campagne de travaux.