D'un premier édifice du 14e siècle, il reste une longue pièce voûtée en berceau au rez-de-chaussée du corps de logis. Une pièce contigüe, voûtée de croisées d'ogives, appartient à une campagne du 15e siècle. Les étages du corps de logis ont été reconstruits dans la seconde moitié du 18e siècle, après le mariage en 1767 de Henriette de la Capelle, dame de Cas, avec Claude Marie, comte de Lastic Saint Jal, dont les armes sont représentées dans la décoration stuquée du salon. D'importants travaux ont été réalisés au 19e siècle. Un projet d'aménagement en caserne de gendarmerie en 1861 n'a pas été exécuté.