Herman Abraham Rozelaar trouwde met Marianne Philips, geboren te Hoorn, 1849. Zij kregen elf kinderen:
Sara (1869-1944), Charlotte (1870-1928), Abraham (1873-1939), Philip (1874-1875), Louis (1875-1938), Zadok (1876), Anna (1877-1877), Margaritta (1879), Rachel (1881-1960), Maurits (1879-1940) en Estella (1882-1943).
Na het overlijden van Marianne Philips op 26 juli 1882, hertrouwde Herman Abraham met Flora Theresa Lorch. Zij kregen nog vier kinderen: Hugo (1885-1941), Caroline (1887-1928), Rosa (1888).