Harmannus Polak was een zoon van Simon Polak en Bettje van Rhijn, een gezin met in totaal negen kinderen. Eén kind stief als baby, 1 jaar oud en één kind heeft de Holocaust overleefd. Alle anderen kinderen, t.w. Carolina, Philip, Hartog, Salomo, Bertha, Anna en Harmannus zelf, werden tijdens de Sjoa vermoord.
Harmannus trouwde op 11 Mei 1906 in Tiel met Rosette Gersons, een dochter van Benjamin D…