Joachim de Rosa was een zoon van Julius de Rosa en Marie d'Oliveijra. Hij had twee zussen, Julie (1915) en Josephine. Zijn moeder overleed in 1931; zijn vader hertrouwde 9 jaar later met een niet-joodse vrouw. Door dit huwelijk zou hij de oorlog overleven. Ook zus Josephine overleefde de oorlog.