L'ancienne école, appelée couvent Neuviale dans l'acte de fondation, a été construite à partir de 1894 (date portée en façade), à l'initiative de l'abbé Pierre Ferrand, curé de la paroisse de Neuviale. D'après une archive conservée au couvent de Notre-Dame du Rosaire à Monteils (département de l'Aveyron), il accueille dès 1896 une école catholique de jeunes filles, dont l'enseignement est assuré par trois soeurs dominicaines. L'édifice est vraisemblablement construit en une seule campagne comme l'atteste la composition d'ensemble. Toutefois, si le corps central et l'aile sud présentent une structure commune, la liaison de l'aile nord au corps central (visible sur l'élévation postérieure, le mur vient s'adosser à la chaîne d'angle du corps central) suppose une légère rupture dans la campagne de construction. Une carte postale (photographie du studio Déjean et Vaïssié) pouvant dater du 1er quart du 20e siècle montre une fête à l'école devant le bâtiment. Certaines fenêtres de l'étage étaient alors murées.
D'après les archives diocésaines, l'école de jeunes filles est toujours en fonctionnement en 1953 (source orale). Durant la seconde moitié du 20e siècle, l'édifice reçoit une nouvelle affectation qui engendre des travaux modifiant l'aménagement intérieur du corps principal (transformation de l'escalier, redistribution des pièces du premier étage, aménagement d'un réfectoire dans l'aile nord) et l'adjonction d'autres bâtiments. Durant le troisième quart du 20e siècle, l'école est transformée en internat pour garçons, provenant du collège catholique de Saint-Jean de la Valette à Parisot (source orale). La remise est aménagée pour recevoir des sanitaires en 1950, d'après une date portée sur l'un des murs intérieurs. L'édifice accueille également des colonies de vacances avant d'être désaffecté à la fin du 20e siècle puis vendu en 2001. Après une campagne de travaux d'une dizaine d'années comprenant entre autres la réfection de la toiture du corps central, l'édifice abrite depuis 2012 des chambres d'hôtes.