Le château date du XIXème siècle et fut la propriété du Comte de Voisenon, Henry Fusée, restauré à la fin du XIX dans un style néo-classique. Ce dernier fut légué par la marquise de Ligneries aux religieuses de Saint Vincent de Paul. En 1930, le château devient la propriété de la Congrégation de Nazareth et y ouvre un pensionnat de jeunes filles.

Le château a fait l’objet de beaucoup d’extension sans le dénaturer pour autant en 1990 et 2002.