Le site de Montolivet, comme celui de Montaut, possède lui un système de collecte des eaux d'infiltration. A l'entrée du réservoir de Montolivet est une date gravée au XIXe siècle en caractères gothiques indiquant sans autre commentaire « 1335 ». Cette date ne peut avoir été apposée arbitrairement : elle doit reprendre une indication épigraphique antérieure ou quelque mention archivistique perdue depuis. Toutefois, le premier occupant assuré du domaine fut Élie de Nabinal : périgourdin, franciscain devenu évêque de Nicosie et Famagouste puis patriarche de Jérusalem, il fait partie des cardinaux de Clément VI, qui l'élève au titre de San Vitale, en 1342. Il meurt le 13 janvier 1348, ayant disposé de ses biens en faveur de Clément VI, lequel offre le domaine à l'une de ses nièces, Marie de Beaufort, fille de Guillaume, épouse de Guérin de Châteauneuf, seigneur d'Apchier, l'un de ses écuyers. De cette dernière, le manoir et les terres reviennent par héritage au cardinal Hugues Roger, frère du pape. Hugues Roger, mort le 21 octobre 1363, souhaitait selon son testament être enseveli à Montolivet où il voulait fonder un collège de chanoines. Son vœu ne fut pas réalisé et sa sépulture fut établie à Saint-Germain-de-Masseré. Les exécuteurs testamentaires du cardinal résolurent en 1384, de vendre Montolivet afin d'y doter le collège de chanoines établi à Saint-Germain. C'est, peut-être dès cette date, que le cardinal Jean de La Grange se porte acquéreur du domaine. Après avoir appartenu à un certain Pierre Mengo (en 1460), le domaine passe aux Montcalm de Saint-Veran, puis aux Tartully, ensuite au pittoresque mousquetaire François Mourgier, en 1695, et à ses héritiers, les Calvet, enfin, par voie d'alliance, aux Roubin. Le domaine connaît deux grandes phases de rénovation, l'une sous François Mourgier, en 1695, qui crée d'importantes et belles annexes, restaure et complète les aménagements hydrauliques du domaine, et l'autre sous Marie-Joseph-Raphaël de Roubin en 1836, qui remodèle entièrement le manoir.