Siège de la seigneurie de Haute-Fraipont qui relevait de la cour de Stavelot, le château est élevé sur les fondations d'une forteresse médiévale dont une partie des épaisses murailles est encore visible à l'arrière du château. Bâti sur un plan en U, le château présente une avant-cour ouverte vers l'ouest, accessible par une allée de conifère. L'aile sud est datée du XVIIe siècle et abritait jadis les écuries. Le rez-de-chaussée comprend un portique fermé de grandes baies en plein cintre. Les façades nord et est ont été reconstruites aux alentours des années 1800. A l'angle sud-ouest, subsiste une belle tourelle d'angle soutenue par un important contrefort, coiffée d'une haute toiture polygonale sommée d'un petit bulbe. Les seules plantations à caractère décoratif sont regroupées sur le petit coteau sud, prolongées en partie haute par des vergers. A partir de cet endroit, un ruisseau s'écoule et sinue en sous-bois jusqu'à la partie basse du parc.