Construction probable au 17e siècle pour les abbés de Saint Guilhem, seigneurs de Saint-Pargoire.
"Les abbés de Saint-Guilhem furent les premiers seigneurs de Saint- Pargoire... Le plus souvent, les seigneurs ne résidaient point dans leur fief ; mais en certaines occasions, on les rencontre résidant au manoir seigneurial, comme il arriva au XVIIe siècle, où les abbés commendataires Henry de Authemar et Gaspard Hugon de Pourchaud firent de Saint-Pargoire leur séjour de prédilection..." (J. LALANNE).
L'ancien château jouxte l'église par l'angle Nord-Ouest de celle-ci.
Voir croquis dans dossier lié.