Hartog is een zoon van Tobias Abraham Sjouwerman en Elisabeth Sweijd. Hij trouwde 26 mei 1920 met Vrouwtje Schaap (22 jaar), dochter van Mozes Schaap en Eva Moffie.
Hartog Sjouwerman en zijn vrouw hadden nog een kind dat in februari 1941 op een ander adres woonachtig was. Dit kind heeft de oorlog overleefd. Toevoeging van een bezoeker van de website
Van dit gezin is ook een JOKOS-dossier (nummer 20072) aanwezig op het Gemeentearchief van Amsterdam. Voor inzage is toestemming nodig van de stichting Joods Maatschappelijk Werk.