Jesaja Swart was het jongste kind uit het huwelijk van Gabriel Swart en Sara Peper. Op 4 augustus 1909 trouwde hij met Saartje Levitus, het eerste kind uit het huwelijk van Heiman Levitus en Esther Kosses.
Jesaja Swart en Saartje Levitus kregen tien kinderen: Hijman, Nathan, Marcus, Margaretha, Izak Jacob en vijf kinderen die de oorlog overleefden.
Het gezin heeft op verschillende adressen in Amst…