La tour templière, adossée à l'église a été épargnée par les guerres de Religion. Elle est le témoin précieux de la première implantation castrale. La construction de cette tour est l'oeuvre des Templiers et, par comparaisons régionales, semblerait dater de la fin du 12e siècle (Mattalia 2009). En effet, il s'avère que le château de Bioule a eu une organisation médiévale semblable avec une tour défensive et une église disposée de la même façon. De surcroît, la construction, très peu modifiée conserve une maçonnerie homogène et de nombreux éléments attestant cette première campagne de construction : une porte à coussinets est visible sur l'élévation est, La salle voûtée en rez-de-chaussée (chapelle des frères) est décorée de peintures murales de cette époque. A l'origine, l'édifice comportait dans sa partie supérieure une galerie de circulation qu'il est possible de restituer grâce aux corbeaux ou à leurs négatifs perceptibles sur les élévations nord, est et sud. Les ouvertures visibles sur l'élévation nord ont probablement été modifiées à l'époque moderne. Les petites ouvertures qui éclairent l'escalier en vis, ont également été transformées, mais l'ébrasement visible depuis l'intérieur laisse penser qu'elles sont à l'emplacement des jours d'origine. La tour est représentée sur un plan du 17e siècle (AD 31, série E, 8 B 45) et sur le plan de bourg de Montricoux de 1770 -1780 (AD 82, 1 Fi 48) coiffée de quatre tourelles d'angle. Fortement endommagée durant la Révolution, la tour templière est encore représentée décapitée, sans toiture sur une lithographie de Taylor et Nodier dans "Voyages pittoresques et romantiques de l'ancienne France, 1820 -1863". Elle a été couverte au milieu du 20e siècle puis les tuiles plates mécaniques ont été remplacées par de l'ardoise en 2012. Aujourd'hui, la chapelle des frères est une salle d'exposition du musée Marcel Lenoir.