Ensuite pendant plus d’un siècle le manoir sert de ferme, il sera toujours habité mais se dégrade. En 1923 l’arrière grand-mère des propriétaires, veuve de guerre, va essayer de vendre à un antiquaire quelques pierres du manoir de Vonnes. Le propriétaire de Villandry Joachim Carvallo, un château voisin, apprend le projet. Il demande au maire de poster deux gardes au manoir et s’occupe du classement des cheminées.