Sinds 1923 woonde Esther Visser-Jesaijes eerst in huisje nummer 20, later in huisje nummer 15 op het terrein van het Binnengasthuis in Zwolle. Het hele complex had als adres de Vechtstraat 103. Huisje nummer 15 is tegenwoordig te definiëren als het benedendeel van de Binnengasthuisstraat 28. Voor dit adres ligt ook de Stolperstein voor Esther Visser-Jesaijes.