La date de 1678 gravée sur le mur de la cave pourrait indiquer la date de construction de l'édifice. L'ancien séminaire puis collège Champolion aurait été construit par M. de Laborie dans la deuxième moitié du 17e siècle. Le décor daterait de la fin du 17e ou du début du 18e siècle. Les peintures murales dateraient de la deuxième moitié du 17e, les décors de boiseries et de toiles des deux salons du début du 18e siècle. La date de 1791, peinte en surcharge sur le panneau central de la cheminée, ne semble pas correspondre à la datation du décor.
En 1982, un incendie ravage les lieux et l'essentiel du décor est déposé. Il sera restauré en 2009.
