Des fouilles archéologiques ont révélé l’occupation du site dès 4000 avant J.-C. Au XIIIe siècle, la forteresse est édifiée par Blanche de Castille et Saint Louis pour y abriter les troupes royales. Louis Ier, Louis II y mènent une vie de cour brillante, entre deux combats et des possessions lointaines. Au XVe siècle, le roi René modernise le château, aménage des jardins d’agrément à l’intérieur de l’enceinte et établit une ménagerie dans les douves. En 1953, des fouilles révèlent les fondations de ses jardins avec leurs tonnelles, volières, pavillons et bassins.
Les guerres de Religion rendent ensuite à la forteresse son rôle défensif. A la fin du XVIe siècle le rempart et les tours sont partiellement arasés pour s’adapter à l’artillerie moderne avant que le château ne devienne une prison. A la fin du XVIIIe siècle, un plan et une vue montre la forteresse massive et le château où seul le logis du gouverneur possède un jardin d’agrément. On édifie plus tard de nouveaux baraquements pour entreposer armes et prisonniers à l’intérieur de la cour. Les occupations militaires se succédant jusqu’au XIXe siècle, le profil d’un jardin purement utilitaire est maintenu et les douves sont totalement abandonnées ce qui profite à une végétation dense et hostile (cf. plaquette "Centre des monuments nationaux, château d’Angers").
Le château est remis à l’administration des Monuments Historiques le 15 Juillet 1947. En 1949 un plan de réaménagement de l’architecte des bâtiments de France, M. Vitry, est accepté. Son projet, comprenant la construction de la galerie de la tenture de l’Apocalypse, sera entièrement réalisé, même s’il souffrira de fouilles entamées quelques années plus tard.
Quant aux douves gérées par la ville d’Angers : d’abord en mauvais état, elles sont nettoyées en 1911 pour accueillir l’année suivante des parterres de mosaïculture dessinés par l’ingénieur de la Ville M. Dupic. Pendant la première guerre mondiale les jardins y sont transformés en potagers pour nourrir les angevins mais dès 1919 ils retrouvent leur vocation ornementale.