Martha Asser was de dochter van Moritz Mouritz Asser en Henriette Levin. Martha was afkomstig uit Altona. Een vriend van Barend Swartberg uit Assen was getrouwd met Martha's zus. Barend is op een gegeven moment naar Altona gegaan en heeft Martha daar ontmoet. Zij trouwden op 23 juni 1904 in Altona-Hamburg. Zij kregen twee kinderen.
Na Barends overlijden ging Martha inwonen bij haar zoon Louis en …