I 1932 giftet Blom seg med amerikaneren Mary Thomas, men seks år senere ble de skilt, og Blom fikk et begynnende alkoholmisbruk, som ble en medvirkende årsak til, at han seinere måtte søke avskjed fra universitetet. Blom flyttet til Mexico, hvor han på en ekspedisjon møtte den sveitsiske fotograf og konservator Gertrude Duby (1901–1993), som han ble gift med.