C'est sur l'emplacement d'une villa gallo-romaine que cet ancien château-fort a été construit par Jean II de Vivonne.
Ayant appartenu un temps à l'ancienne puissante famille des Lusignan qui régna sur Jerusalem et sur Chypre, il fut en partie détruit pendant les guerres de religion et lors de la Révolution.
Restauré à la fin du XIX^éme siècle, ce bijou de l'histoire locale domine, en sentinelle, la vallée du Clain.

Au coeur d'un décor incomparable, sur les lieux mêmes où les romains érigèrent la villa Trossora, non loin des ruines d'une ancienne abbaye de l'ordre de Grandmont, ce château fut édifié en 1872.

Jusqu'au XIV^ème siècle, un donjon : "le château de la Clavière" (la clé), surveille la vallée et la route d'accès vers le sud.
200 ans plus tard, et 200 mètres plus loin, le château actuel est construit pour devenir la propriété d'un trésorier du roi Henri IV.