Suite à un manque d'entretien et au contexte trouble de la «fronde» vers 1650, le pouvoir choisit de détruire le château, ce qui est fait en 1654.
Tombé ensuite dans l'oubli, il ne fut redécouvert qu'au XX siècle. Racheté par la commune au Touring Club de France en 1988, le château de Termes est classé Monument historique l'année suivante et ouvert au public. Restaurations et fouilles archéologiques y sont aujourd'hui menées de pair.