Le château fut en partie détruit, avec le village, par le Prince Noir venu assiéger, en 1369, le château voisin de Bourdeilles. A la fin du 15e siècle, construction d'un corps de logis flanqué d'une tour octogonale entre les deux grosses tours rondes subsistantes du château initial. En 1569, Coligny y fit massacrer dans une salle basse, 260 paysans qui y avaient cherché refuge pour se protéger des armées huguenotes. En 1653, Antoine de Chabans, fidèle au roi, assiégea le château pour reprendre possession du domaine que ses frères, partisans du prince de Condé, s'étaient approprié. Rétabli dans ses murs, le marquis détruisit les fortifications et le pont-levis, construisit un châtelet et les écuries, et aménagea les terrasses. Au 18e siècle, une maison basse fut ajoutée, attenante aux bâtiments principaux. D'autres dépendances ferment le côté nord de la cour intérieure, ayant conservé leur fonction domestique. En 1916, la foudre ravagea l'ensemble des toitures qui ne furent pas rétablies.
