Cette demeure caractéristique des constructions bagnéraises du 18e siècle fait office de pension au moins tout au long du 19e siècle. Elle est située face aux Bains de Santé et du Grand Prieur, où se trouvait la propriété de José de Lugo, le bâtisseur de l'hôtel Frascati. Durant sa jeunesse, Eugénie de Montijo voyage avec sa mère dans les Pyrénées aux Eaux-Bonnes et à Bagnères-de-Bigorre en 1845. Elle aurait été hébergée dans cette pension à proximité des Grands Thermes mais aussi de la résidence de la famille de Lugo avec laquelle elle semblait liée. C'est pourquoi cette bâtisse, qui accueille une clientèle élitiste, se voit rebaptisée Villa Eugénie après le sacre de limpératrice.
D'après les plans d'alignement, elle est tenue par Mlle Dufréchou en 1860 et apparaît sous ce nom dans les listes d'étrangers publiées par la presse thermale dans les années 1850 et 1860.