Victor Mayer was getrouwd met Johanna Hecht en hadden twee zonen, Leopold en Hans Werner.
Het gezin kwam als vluchteling terecht in Kamp Westerbork op garantie van Samuel Mijerson uit Deventer. Mijerson, die een accountantskantoor had, werd op 12-12-1940 door stichting voor Bijzondere Joodsche Belangen (later opgegaan in de Joodsche Raad) verplicht om kampgelden voor hen te betalen.