Du côté ville, les arcades du cloître ont été réouvertes et isolées par des vitres. En 1965, le jardin central fut remis en état et un bassin avec jets d’eau a pris la place du quatrième côté qui fermait totalement le cloître à l’origine. Depuis 1950, le jardin potager est progressivement transformé en jardin d’agrément « à la Française » ouvert au public. Des quatre statues représentant les quatre saisons, il ne reste que Cérès, la déesse aux riches moissons, fruit du sculpteur A. Lefèvre en 1781. Une large allée centrale gravillonnée mène de la maison de retraite aux anciennes douves. Des bordures de rosiers ornent chaque sentes et des bancs sont disposés à l’ombre des arbres dont quelques pruniers et pommiers. D’imposants massifs floraux habilement composés trônent au milieu des pelouses.
Une partie du jardin est masqué par une haute haie de conifères et abrite le jardin des plantes tinctoriales aménagé par le musée du feutre : gaume, oeillet d’inde et garance servent encore à donner des couleurs au feutre artisanal. Chaque année une décoration florale est réalisée par le jardinier de la maison de retraite et développe tour à tour différents thèmes : horloge, fontaine, cor de chasse ou l’avion de Roger Sommer, un membre de la famille fondatrice de l’industrie du feutre à Mouzon.