La propriété appartient à la famille de La Borey jusqu’à la Révolution française. Le château est au départ un château défensif avec quatre tours de défense. Le fils unique de Mme de La Borey doit s’enfuir à l’étranger à la Révolution comme de nombreux nobles. Il est donc déclaré émigré et ses biens lui sont confisqués au profit de la Révolution. Il essaie de rentrer clandestinement en France après la Révolution mais il est fait prisonnier à Paris et fusillé. Mme de La Borey vend son château à M. Des Biez, Baron de St Juan (du nom d’un village proche de Besançon d’où est originaire la famille). Le Baron s’y installe avec sa famille et notamment son fils Charles. Le château ne comporte que le bâtiment principal. Le Baron de St Juan modifie le château afin de lui apporter le confort nécessaire. Il remanie la façade en y ajoutant deux ailes parfaitement symétriques, dans l’une desquelles il fait construire un escalier d’honneur. Il fait entrer la lumière en faisant percer de grandes fenêtres. Son fils Charles héritera du château et transformera le parc à la française en un parc à l’anglaise, (cascade, rivière serpentine, essences exotiques et roses). Le château sera le lieu de rencontres des poètes, écrivains et artistes de l’époque jusqu’au XIXe siècle. Le château a gardé le style directoire et empire de l’époque. Le parc (copie du parc de Chateaubriand dans la vallée aux loups) est inscrit au supplément de l’inventaire des monuments historiques.