Création en 1631 d'un monastère de la Visitation par l'évêque Pierre de Fenouillet. Construction des bâtiments conventuels sur les plans de Jean Bonnassier qui adapte le plan type fourni par la maison mère de l'ordre, entre 1650 et 1656, date de consécration de l'église.
Le clocher réalisé en 1675 et l'achèvement du cloître sont dus à Antoine Armand. Aménagement des tribunes de la chapelle dans la 2è moitié du 19è siècle.
En 1956, les bâtiments conventuels sont vendus a l'Université, le bâtiment ouest est alors englobé dans les nouveaux bâtiments de la Faculté de Droit construits par Marcel Bernard.