Vestiges d'un logis ou d'une chapelle castrale et d'une tour médiévale du 12e siècle englobés dans les constructions modernes. Réaménagements défensifs durant la 2e moitié du 15e siècle suite à une autorisation accordée par Louis XI à Bernard de Fumel de fortifier son château ruiné par la guerre de Cent Ans. Reconstruction du château durant le 3e quart du 16e siècle pour François, baron de Fumel, selon un plan en H organisé autour de 2 cours en terrasses, peut-être par l'architecte Pierre Souffron II, à moins qu'il ne s'agisse de Pierre Lescot ou Dominique Bachelier (attributions par travaux historiques de G. Séraphin). Travaux interrompus en 1561 après l'assassinat du baron de Fumel, repris par des équipes locales. Terrasses bastionnées de la 2e moitié du 16e siècle ou du début du 17e siècle. Nouvelle campagne d'aménagements durant la 2e moitié du 17e siècle pour François-Joseph, comte de Fumel, et Catherine d'Aulède, portant notamment sur le parterre de jardins. Travaux de réfection des bâtiments et jardins en 1763 par l'architecte Jean-Baptiste Chaussard. Achèvement de l'aile est et du pavillon nord vers 1771. Divers projets d'aménagement durant le 4e quart du 19e siècle pour le baron de Langsdorff, dont le couronnement de l'élévation antérieure par une balustrade en 1882 et la restauration du portail d'entrée de la basse-cour par l'architecte Léopold Payen vers 1900 (datations et attributions par sources). Installation de la mairie en 1950 après l'achat du château par la commune.