Depuis 1925, le Château de Clermont est classé monument historique.
ce château est connu pour avoir été la propriété de l'acteur Louis de Funès, dont il fut la dernière résidence jusqu'à la mort du comédien en 1983. De 2014 à 2016, l'orangerie du château accueille le « musée de Louis », consacré à l'acteur.