Le château Colbert doit son nom au grand ministre de Louis XIV, qui acheta le domaine en 1682 afin de creuser un étang destiné à alimenter les fontaines de son château de Sceaux.
Sa construction est postérieure au ministre Colbert puisqu’elle date vraisemblablement de la première moitié du XVIIIe siècle. La propriété est alors composée d’une belle maison de maître au toit mansardé et d’un ensemble assez complet de communs (chapelle, écurie, orangerie, bûcher, etc.).
Divers propriétaires se succèdent jusqu’à son rachat 1888 par la Société du Refuge, une œuvre de bienfaisance juive. Le château devient alors une école d’horticulture dont la vocation est de soustraire des jeunes garçons juifs à la délinquance en leur apportant le cadre structurant d’une éducation fondée sur l’apprentissage des métiers de la terre.
En 1923, l’école déménage et la propriété est vendue pour créer un lotissement dans lequel subsiste encore de nos jours le château, devenu un temps presbytère, et une partie des anciens communs.
Propriété privée, on ne visite pas.