Sur le plan cadastral de 1833, il était représenté deux parcelles abritant une grange et une grange et une écurie. La congrégation des soeurs de la Croix l'acquirent à une date indéterminée, peut être est-ce en 1860 (A.C. Sorèze, 4 M 1), date d'un acte notarié du 3 novembre pour l'achat d'une maison avec jardin contigu. Un devis estimatif dressé par le maçon Antoine Blanc (A.C. Sorèze, 4 M 1), mais non daté, rend compte de travaux à faire à la maison des soeurs. Ils consistent entre autres à carreler la salle de classe, à percer fenêtres et placer des menuiseries de portes. En 1873, la Supérieure des soeurs demande une subvention pour effectuer des travaux de réparations à l'école communale de filles qui accueille alors 65 jeunes filles (A.C. Sorèze, 4 M 1). Deux plans et coupes dressés en 1873 rendent compte d'un projet d'agrandissement de la salle de classe, le relevé de la façade étant un précieux état des lieux à cette date. La mairie ne voulut pas financer des aménagements pour une école établie sur un terrain privé. Le bâtiment comprenait deux salles de classe et le logement pour les instituteurs. En 1875, il est entrevu la possibilité d'installer l'école de filles dans les anciens locaux des casernes, propriété communale. L'école de la rue Rastoul resta en fonction jusqu'en 1878, date à laquelle l'école de filles fut transférée dans l'ancien bâtiment des casernes alors réaménagé pour sa nouvelle fonction.