Implanté à mi-chemin entre la gare et l'église des Templiers dans le bourg de Luz, ce vaste édifice figure déjà sur le plan cadastral de la première moitié du 19e siècle où il accueille vraisemblablement une pension pour voyageurs. Ses dispositions et la documentation iconographique démontrent qu'il fait l'objet de remaniements sous le Second Empire et la Troisième République, en particulier avec un agrandissement intégrant son pan coupé percé d'une porte-cochère.
Une lithographie du milieu du 19e siècle montre qu'il était tenu par la famille Cazaux (dont le nom était inscrit en façade) et accueillait un relais de poste aux chevaux. Il apparaît ensuite dans les cartes postales du début du 20e siècle sous la dénomination ""Hôtel des Pyrénées"". Les annonces publiées montrent qu'il exploitait son emplacement "à la jonction des avenue de Saint-Sauveur et de Barèges" pour loger des curistes fréquentant l'une ou l'autre de ces stations. En 1877, l'encart précise qu'il s'agit du plus ancien hôtel de la vallée, au cenre des excursions pyrénéennes. il se trouve alors à 1 h de Pierrefitte (où se trouve la gare) et à 10 minutes de Saint-Sauveur. On y trouve des appartements très confortables et des chambres, une table d'hôte, un restaurant, un salon particulier. "Les touristes qui vont de Cauterets à Gavarnie déjeunent à l'hôtel des Pyrénées". (Journal de Cauterets, 28 juillet 1877).
Russel y passe la nuit du 9 novembre 1881 : il évoque "l'excellent hôtel des Pyrénées" tenu par Cazaux (Journal de Cauterets, 11 janvier 1882).
L'annonce de 1883 indique qu'il est la propriété de Sassisou-Cazaux. Il se recommande par sa bonne tenue et son service ; il offre les services conjugués d'un restaurant et d'une table d'haute. Il offre des chambres individuelles mais aussi des appartements pour famille. Son emplacement est également mis à profit du tourisme pyrénéen : "particulièrement recommandé aux touristes de Gauterets qui doivent déjeuner à Luz en se rendant à Gavarnie" (Journal de Cauterets, 22 septembre 1883).
De nos jours, il accueille les locaux d'une cave et des espaces commerciaux au rez-de-chaussée et des logements dans les étages.