C'est le Seigneur François de Caumont qui fit édifier cette demeure en 1489 à la demande de son épouse, Claude de Cardaillac.
Afin de donner davantage de relief au jardin, Monsieur et Madame Henry de
Labarre, nouveaux propriétaires ont planté plus de 2800 buis pour former un ensemble cohérent de différents parterres : quatre parterres à l'entrée du château entourant les fameux magnolias de 1900, plusieurs parterres devant la façade principale présentant plus de 3500 fleurs autour d'une fontaine installée en 2007, un parterre au nord permettant à nos rapaces de s'épanouir en spectacle et enfin plus de 250 lavandes situées devant la tour ronde au nord est du château.