Hugo Alfvén var gift med den danske maleren Marie Triepcke Krøyer Alfvén, som han skilte seg fra i 1936. Ekteparet hadde datteren Margita Alfvén sammen.