Le Petit Château était une belle demeure du XVIIIe siècle détruite en 1954 pour élargir la rue et construire la cité de l’enfance.
Il fut occupé sous Napoléon Ier par Frédéric-César de La Harpe, savant suisse et précepteur du futur tsar Alexandre III, puis, de 1854 à 1891, par Louis Bréton, gendre et associé de Louis Hachette. La fille de son dernier propriétaire, Marguerite Lewandowska, fut infirmière et assistante sociale pendant la Seconde guerre mondiale. Elle mourut en 1944 au cours d’une mission de secours aux réfugiés et aux blessés.