Probablement très ancienne, la paroisse de Lunac est érigée en prieuré dans la deuxième moitié du 11e siècle. Elle compte 160 feux en 1328 d'après le recensement des feux en Rouergue contenu dans le livre de l'Epervier (Cartulaire de Millau, B.N. Fonds latins, 185 - 1341). L'église Saint-Jean-Baptiste et Saint-Saturnin est mentionnée entre 1051 et 1070 dans un acte de donation à l'abbaye de la Chaise-Dieu. Elle est sans doute reconstruite peu après la fin du 11e siècle, comme en témoignent le chevet et le transept conservés qui se rattachent à la période romane (édifice inscrit MH, 1937/09/24 : abside, transept, coupole, pilier, autel). La présence de cet édifice conditionne, peut-être dès le 11e siècle, la formation d'un habitat aggloméré qui apparaît au milieu du 13e siècle sous le terme de ""castrum"" (reconnaissances passées en 1259 par les coseigneurs de Lunac au comte Alphonse de Poitiers pour des parts du ""castrum"" de Lunac, A.N. JJ 11, fol. 127-129). Ce terme renvoie, à cette époque, à l'ensemble fortifié constitué par l'agglomération et une fortification seigneuriale qui est l'assise d'un ""dominium castri"". Cependant, le château actuel, qui s'élève à proximité de l'église, en position périphérique sur le tracé de l'enceinte collective, résulte d'une campagne de construction homogène probablement datée du début du 16e siècle. Des doutes subsistent ainsi quant à l'emplacement du premier château et son rôle dans la genèse de l'habitat groupé. Il est difficile d'affirmer qu'il se situait à l'emplacement de l'édifice moderne actuel ou au centre du noyau fortifié, constituant avec l'église un pôle de regroupement de l'habitat. Les sources appuient au contraire l'hypothèse d'un site castral primitif situé à l'extérieur de l'habitat groupé. En effet, un ensemble de parcelles non bâties, délimité par un chemin en épingle au nord du village actuel, est associé au toponyme ""Castel Vieil"" depuis le début du 16e siècle (""terroir du Castel Vieil"", 1518, A.D 12, J 70 ; 1651, A.D. 12, 2E 147-2 ; cadastre 19e siècle ; cadastre actuel ZM 01 25 et suiv.). Ce toponyme ancien atteste l'existence d'une fortification seigneuriale disparue mais la mention d'un ""terroir du Château Vieux"" relevée au début du 16e siècle ne permet pas de déterminer s'il s'agit d'un château antérieur à celui qui est mentionné au 13e siècle (ancienne fortification du 10e ou du 11e siècle ?) ou à celui qui est construit à la limite des 15e et 16e siècles. Deux hypothèses restent donc plausibles en l'absence d'une étude plus approfondie des sources. Selon la première hypothèse, le site castral reste à l'extérieur du bourg qui est groupé autour du prieuré jusqu'à la fin du Moyen Age, puis il est abandonné au profit d'une maison forte construite près de l'église par le seigneur local. Selon la seconde hypothèse, une fortification ancienne (tour sur motte ?) s'élève au nord du village actuel au 11e ou au 12e siècle, mais le siège du pouvoir châtelain est déplacé dans le noyau d'habitat en cours de formation près de l'église avant le milieu du 13e siècle, peut-être en lien avec la reprise en main de la coseigneurie locale par les comtes de Toulouse (hommage des coseigneurs à Alphonse de Poitiers en 1259, cf. ci-dessus). Ce château serait ensuite détruit et remplacé par un manoir à l'extrême fin du Moyen Age ou au début de la période moderne. Dans les deux cas, l'église construite avant le milieu du 11e siècle semble garder un rôle premier dans la concentration de l'habitat et conditionner dans un premier temps l'implantation du bâti dans la mesure où, au 11e siècle, la fortification castrale se situait vraisemblablement au ""terroir du Castel Vieil"". En revanche, l'impact de la présence du château sur le développement de l'habitat groupé et la formation d'un petit bourg fortifié dès le 13e siècle - voire avant - reste indéniable. Le pôle castral semble cependant rester longtemps isolé et ne pas directement conditionner la mise en place de la trame bâtie. La couronne de maisons définissant le tracé d'une enceinte collective par l'alignement des façades postérieures pourrait correspondre à une seconde phase de développement autour du premier noyau formé près de l'église. La trame bâtie actuelle correspondrait ainsi à l'emprise du ""castrum"" mentionné au milieu du 13e siècle, même si l'enceinte castrale est sans doute en grande partie remaniée lors de la remise en défense du bourg dans le contexte de la guerre de Cent Ans. Outre les fortifications d'ensemble, des indices signalent l'existence d'un réduit fortifié peut-être aménagé au cours de cette période de troubles de la fin du Moyen Age. En effet, d'après le marquis de Valady, un arrêt du Parlement de Toulouse de 1440 autorise les consuls et habitants de Lunac valide réparer le ""fort"" du lieu à la condition qu'ils le démolissent chaque fois que la Cour le demandera. Un autre acte signale la présence d'au moins une maison dans le ""fort"" (A.D. 12, E 301) . Ces termes semblent faire référence à une fortification collective distincte de l'enceinte castrale en partie formée par les maisons, mais dont l'emplacement reste inconnu. Elle a peut-être été aménagée autour de l'ancien pôle castral dont il ne subsiste pas de trace, mais son existence doit être confirmée par des sources plus explicites. A partir du noyau fortifié, un faubourg se développe à l'ouest, le long de la voie principale menant à la porte du ""castrum"". Les vestiges les plus anciens repérés dans ce secteur ne sont pas antérieurs au 16e voire au 17e siècle. Le compoix du milieu du 17e siècle confirme l'existence d'une trame bâtie extra-muros mais il est difficile d'en dater précisément la formation. Le village s'étend enfin en contrebas de la terrasse castrale aux 19e et 20e siècles, en bordure de la route vers Najac et Villefranche.