Joseph Brilleslijper was een zoon van Machiel Brilleslijper en Rebekka Bamberger. Hij trouwde op 15 November 1911 met Vrouwtje van Geens, dochter van Jonas van Geens en Margaretha Halberstadt. Met Vrouwtje van Geens kreeg Joseph Brilleslijper drie kinderen: Machiel, Margaretha en Rebekka.
Op 24 Juli 1924 overleed Vrouwtje van Geens en een jaar later op 1 Juli 1925 trouwde Joseph Brilleslijper met…