Joseph is een zoon van Salomon van Gelder en Johanna Feitsma. Hij trouwde augustus 1922 met Saartje de Jong (Amsterdam, 26 maart 1901 - Amsterdam, 2 september 1924).
Na het overlijden van Saartje in 1924 hertrouwde hij in 1930 met Luise Viktoria Margarete Volklan (Krefeld Dl, 28 mei 1897)
Het paar scheidde in 1952. Na de scheiding is Joseph in Zandvoort gaan wonen, Marisstraat 20.
Bron SAA archiefkaart Joseph van Gelder 18-6-1900