Le 1er édifice date du X et XIII ème siècle mais il sera détruit lors de la guerre de Cent Ans. Le château que nous découvrons aujourd’hui est construit au début du XV ème siècle par le maréchal de France Jean 1er de Brosse, compagnon de Jeanne d’Arc. Après Jean II, Jean III, René, il passe à Jean IV de Brosse qui est l’époux d’Anne de Pisseleu la favorite de François 1er . Plus tard le château appartiendra à Françoise de Lorraine, l’épouse de César de Vendôme, fils légitime d’Henri IV et de Gabrielle d’Estrées.