Simon is een zoon van Jacob Brilleman en Leentje Cohen. Hij trouwde februari 1896 met Aagje Kleijn (A'dam, 17 juni 1863-A'dam, 1 januari 1938).
Kinderen:
Simon, 4 november 1883
Jacob, 26 maart 1886
Helena Maria, 3 juli 1888
Johannes, 6 december 1891
Aagje, 7 juni 1894
Jacobus, 29 augustus 1897
Gerzina, 22 november 1899
Johanna Geertruida, 27 december 1902
Hermanus, 16 februari 1905
Bron SAA archiefkaart Simon Brilleman (21-1-1863)