Le village de Flamarens paraît s'être formé en plusieurs étapes successives. Un premier castelnau semble avoir été érigé à l'est du château, dans le prolongement de celui-ci, sur une plateforme. Le faubourg, situé de l'autre côté de la route, se serait ensuite développé. Enfin, le tout aurait été entouré d'une enceinte collective. Cette enceinte, encore visible au nord et au sud du village, présente des caractéristiques de construction de la fin du 13e siècle ou du début du 14e siècle (moyen appareil calcaire monté en assises régulières et à joints fins). Il est probable que ces différentes étapes aient eu lieu au cours du 13e siècle. L'église a été bâtie dans les premières années du 16e siècle à l'emplacement d'une église antérieure effondrée. A la fin du 15e siècle et au début du siècle suivant le village semble s'être partiellement dépeuplé au profit de hameaux des environs. L'église est inscrite à l'Inventaire supplémentaire des monuments historiques depuis 1993. Le château est classé Monument Historique depuis 1965.