Le couvent des Soeurs de l'Espérance est représenté sur le plan de Luchon dressé en 1873 par Castex, architecte de la ville. Il n'apparaît pas sur le plan publié dans l'ouvrage de Lambron en 1860 (op. citée, p. 331) ce qui permet de dater sa construction entre ces deux dates. La congrégation avait été fondée par l'abbé Noailles à Bordeaux en 1836. La vocation de l'ordre est le soin aux malades ce qui explique son implantation à Luchon. La maison accueillait aussi des dames pendant la saison, pour une pension de 7 à 8 F par jour en 1896 (La France charitable, p. 11).
Le couvent a ensuite été occupé, au moins à partir de 1929, par les soeurs dominicaines du Saint Nom de Jésus pour en faire une maison d'accueil. Le but de cette congrégation, fondée en 1800 à Toulouse, était de proposer une éducation chrétienne aux jeunes filles défavorisées et de créer des écoles gratuites pour les enfants pauvres. Une annonce dans le journal La Croix en 1929 présente les installations modernes de l'institut à cette époque : "chauffage central, bains douches". Le contenu des cours est également détaillé : "préparations aux divers examens. Latin, langues viv., art d'agr., cours ménagers", ainsi que le mode de vie "Vie familiale. Cure d'air".
Pendant la Grande Guerre, le couvent devient l'hôpital bénévole 147 bis, réservé aux officiers.
Les bâtiments ont été rachetés en 2012 par l'association 1 Maillot pour la Vie qui les a aménagés en hôtel-restaurant afin d'accueillir des enfants malades et leurs familles en vacances. L'association a été contrainte de les mettre en vente en 2015.