Le château est établi à mi pente, à la naissance de la petite vallée du ruisseau de Peyrilles. Il s'inscrit dans une enceinte ovalaire, couronnant le sommet d'un pech conique isolé par un vallon et évoquant la silhouette d'une motte. Au pied de cette "pseudo motte" s'est implanté un bourg castral en ordre lâche autour de l'église paroissiale. L'édifice, tel qu'il se présente aujourd'hui, s'organise en trois travées autour d'une cour exiguë mais deux travées supplémentaires effondrées semblent manquer au nord et au sud. Face au village, le front oriental offre une élévation en apparence homogène dont l'essentiel remonte à l'époque médiévale. De part et d'autre d'un portail d'entrée en arc brisé, des archères cruciformes assurent la protection de l'accès. Leurs croisillons évasés et leurs deux étriers triangulaires, supérieur et inférieur, confirment l'attribution de l'ensemble aux dernières années du 13e siècle, voire au siècle suivant. Au-dessus, l'élévation était ordonnée par un double cordon mouluré sur lequel s'arrangeaient des fenêtres, sans doute à réseaux, à en juger par l'ampleur de leurs embrasures internes. Au centre de cette composition monumentale, une fenêtre à remplage, repercée au 16e siècle, signale la présence de l'oratoire qui assurait une protection sacrée au-dessus de l'accès. Une importante trace de reprise à la base du front oriental fait apparaître un tronçon de maçonnerie en moyen appareil, antérieure à celles dans lesquelles s'insèrent les archères de la fin du 13e siècle. Cette maçonnerie primitive, qui apparaît également à la base des murs de la travée sud, pourrait appartenir au château de la fin du 12e siècle dont on suppose qu'il fut pris (et détruit ?) par Richard Coeur-de-Lion en 1188.£A l'arrière du portail, un couloir d'accès de 2,50 m de largeur, faisant office de courette, constitue la travée centrale et distribue des corps de logis de part et d'autre, la vis d'escalier en occupant l'extrémité ouest. La travée nord semble correspondre à la grande salle comme invitent à le supposer les deux grandes fenêtres, sans doute à réseaux, de l'élévation est, face au village. Surmontant une salle basse ouvrant sur la courette par une ample porte en arc brisé, la grande salle elle-même a fait l'objet d'une réfection presque complète vers 1500 qui l'a dotée d'une cheminée monumentale. Elle était doublée au nord par une seconde travée de logis, aujourd'hui effondrée, dont ne subsistent que les arrachements. L'oratoire, établi dans la travée centrale, résulte lui aussi des réfections de la fin du 15e siècle ou du début du siècle suivant, comme en témoigne sa voûte d'ogives retombant sur des culots ornés de roses épanouies. Le corps de logis occupant la travée méridionale, ne semble pas, pour sa part, être antérieur à l'édification de la tour d'escalier. Ses bases appareillées, montrent cependant qu'il a remplacé un ancien bâtiment médiéval apparemment effondré. L'antériorité apparente de ses parements extérieurs incendiés, sur ceux de la grande salle médiévale, de même que la particularité de ses chaînes d'angle de brèche sombre, inciteraient à y voir les vestiges du château primitif attesté à la fin du 12e siècle. La tour maîtresse se distingue dans l'économie d'ensemble du château par son implantation biaise, affirmant, en principe, son indépendance, voire son antériorité. Ses caractères architecturaux ne permettent guère cependant de la faire remonter au-delà du dernier tiers du 13e siècle. De plan carré (8,40 m de côté), elle est aujourd'hui tronquée au-dessus de son premier étage et n'atteint plus que 13 m de hauteur environ. Un soubassement soigneusement biseauté anime ses élévations en partie basse. Le niveau inférieur de la tour est aujourd'hui voûté en plein cintre et une porte, repercée au début du 16e siècle, lui donne un accès direct depuis la grande vis d'escalier attenante. Initialement, il semble cependant que cette pièce ait été couverte par un simple plancher, et que son accès se soit effectué par une trappe. Deux soupiraux, l'un médiéval, l'autre repercé au 15e ou 16e siècle, en constituent les uniques aérations. Avant d'être relié à la vis d'escalier par une porte-couloir semblable à celle de l'étage inférieur, l'étage de la tour disposait d'un accès autonome. Une porte en arc brisé, murée vraisemblablement dès la fin du 15e siècle, ouvrait en effet à l'opposé des logis, sur l'actuelle terrasse méridionale, à une hauteur de 3,50 m environ du sol extérieur d'origine. La salle d'accès est couverte par une croisée d'ogives, sans clé, dont les branches d'ogives prismatiques reposant sur des culots frustes semblent appartenir à l'ouvrage médiéval bien qu'elles n'offrent que peu de prise à la datation. La fenêtre haute qui éclaire la salle au sud, résulte en revanche d'un repercement manifeste. A l'opposé de la porte d'accès originelle, les traces d'une ancienne vis d'escalier et des raccords de maçonneries visibles dans l'actuel couloir d'accès montrent que l'aménagement de celui-ci s'opéra au détriment d'une ancienne tourelle d'escalier soudée à la tour. Cette tourelle d'escalier, qui desservait manifestement les étages supérieurs de la tour, n'a conservé aucune trace de ses percements d'origine, à l'exception d'une baie murée en partie haute, dont le couvrement interne était assuré par un linteau sur coussinets. Quelques assises subsistent d'un deuxième étage, en grande partie condamné par l'accumulation de ses propres décombres. Les parements extérieurs y laissent apparaître la trace d'une porte haute surmontant des trous d'encastrement.