Cette fabrique d'ornements en terre cuite a été fondée en 1855 (date figurant sur le papier à en-tête de la manufacture Giscard) par Jean-Baptiste Giscard (1818-1906), ancien contremaître de l'usine Virebent de Launaguet et développée par son fils Bernard (1851-1926). Henri Giscard (1895-1985), fils de Bernard, après des études d'art, poursuit l'activité de la fabrique. Il enseigne également à l'école des Beaux-Arts de Toulouse en tant que professeur de céramique et de moulage. La manufacture se spécialise dans l'art religieux de série et devient le dépositaire officiel du carmel de Lisieux pour la réalisation de la statue de sainte Thérèse de l'Enfant Jésus, d'après l'oeuvre du révérend-père Marie Bernard. Cette activité semi-industrielle insérée dans le tissu urbain des faubourgs occupait à l'origine trois maisons situées 25 et 27 avenue de la Colonne et 31 rue Paul-Dupin et un coeur d'îlot. La manufacture est à son apogée dans les années 1920, elle emploie alors une cinquantaine de salariés. La production diminue fortement après la seconde guerre mondiale, notamment avec le renouveau de l'art sacré rejetant les courants néo-médiévaux et académiques dominant l'art religieux jusqu'alors. Joseph Giscard (1931-2005), dernier descendant de cette famille d'ornementistes, achète en 1968 une partie des moules de la famille Virebent, initiateur, au milieu du 19e siècle, de cet art du moulage de décors en terre cuite. La propriété est par la suite divisée, individualisant les différents bâtiments. En 1975, les maisons situées au 27 rue de la Colonne et au 31 rue Dupin sont protégés au titre des Monuments Historiques (inscription des façades et toitures). Cette protection est étendue en 1998 aux ateliers et bâtiments s'organisant autour de la cour centrale. A sa mort en janvier 2005, Joseph Giscard lègue sa maison à la ville de Toulouse en précisant ""Que ma demeure et mon atelier soient un lieu de vie où sera perpétué les métiers d'art des maisons Giscard et Virebent."" La ville accepte le legs le 14 février 2005. Les archives de la fabrique Giscard ont, pour leur part, été déposées dans les collections des Archives municipales au mois de décembre 2005.