Les origines du prieuré bénédictin ne sont pas connues, et seule la dédicace à Saint-Martin peut faire supposer une fondation ancienne. Le chevet de l'église n'est peut-être pas antérieur à la seconde moitié du 12e siècle, tandis que la nef et les chapelles qui la bordent sont gothiques, sans doute en grande partie du 15e siècle. L'église a fait l'objet d'importants travaux vers 1875 (Foulquier-Lavergne, p. 171).