Reconstruit sur un plan ambitieux au XVIIe siècle, le château de Hautefort était accompagné de jardins à la française, disposés devant sa façade latérale ouest.
En 1853, une réfection complète du parc et des jardins est commandée par le baron de Damas à un des paysagistes les plus connus de l’époque, le comte de Choulot. Il réalise à Hautefort un plan ambitieux qui intègre le château, les jardins, le parc et le paysage dans un ensemble cohérent.
Après l’achat du domaine par la baronne de Bastard en 1929, ce sont les abords du château qui bénéficient des travaux les plus importants. A l’ouest, une galerie de verdure doublée par un parterre de buis, remplace les anciens communs détruits au XIXe siècle. Au pied du château, les parterres à l’est et au sud, créés par Choulot, conservent leurs grandes lignes mais sont complètement replantés avec des buis taillés séparés par des massifs fleuris très colorés. Au nord, la terrasse est également plantée de buis et d’ifs taillés en colonne.
Les jardins, classés Monuments Historiques, participent aujourd’hui de manière majeure à la renommée du domaine et au plaisir de sa visite.