Il existe ici une forteresse depuis le XIème siècle, défendant le passage du Cosson.
De nombreuses familles s'y succèdent, en particulier au XVllème siècle, Henri II de La Ferté-Sennectère, maréchal de France, et au XVlllème siècle le maréchal Woldemar de Lowendal. Le château est construit sur un immense terre-plein rectangulaire, isolé par des douves et séparé de la route par une vaste pelouse. Depuis 1992, les jardins de la cour d'honneur retrouvent leur ordonnancement du XVlllème siècle ; les carrés de pelouses sont redessinés dans l'avant-cour, la cour d'écurie et la cour d'honneur. L'allée centrale est retrouvée et le mur de séparation entre les deux cours du château a été reconstruit. Des charmilles ont été implantées pour permettre à gauche de créer une carrière de travail pour les chevaux et à droite un jardin d'agrément.
Le parc couvre une superficie de quarante hectares, dont sept de bras d'eau et plusieurs îles qui en font le charme. Sa création remonte à 1630 ; c'est alors un jardin à la française, avec de grands massifs à broderies situés derrière le château. Les eaux canalisées du Cosson isolent différents terre-pleins et créent un réseau de parterres réguliers et symétriques et de grandes perspectives avec allées, bois et bassins ; il existe aussi une orangerie.
Au XlXème siècle, sous le prince Masséna, le parc est remis au goût du jour.
Les jardins à la française derrière le château disparaissent pour laisser la place à un parc romantique à l'anglaise. Des essences d'arbres variées sont alors implantées. Sur l'île de l'Ermitage, on voit encore les énormes cyprès chauves, sur l'île de la Chapelle un bel araucaria, ou "arbre aux singes".
Depuis 1987, un parc animalier, une ferme à l'ancienne et une «île enchantée» avec des décors grandeur nature de contes de fées, ont été implantés dans le parc pour rehausser l'intérêt de la promenade.