Louis IX fait construire le château actuel au XIIIe siècle tandis que les ducs d'Anjou vont le transformer en résidence seigneuriale au XVe siècle.
Au XVIIe siècle, le roi ordonne la destruction du château, mais seul la partie supérieure des tours est détruite.