Au 11, rue de Sèvres se trouvait l’ancien du couvent des Prémontrés, dont la chapelle avait été démolie après la Révolution et dont les cellules avaient été converties en logements. C’est là que la mère de Huysmans s'installa auprès de ses parents après la mort de son mari. En 1858 fut aménagé, par son nouvel époux, M. Og, l'atelier de brochage que Huysmans décrivit dans Les Sœurs Vatard et dont il tira longtemps des ressources non négligeables.
Huysmans revint plus tard habiter cette maison, mais dans un petit appartement au 5^e étage, à gauche dans cette cour, qu'il appelait sa « lanterne ». Il y demeura jusqu'à son départ pour Ligugé en 1898.