Thor Listau ble født i Svolvær i Lofoten som sønn av fiskematprodusent Magnus Listau (1898–1976) og husmor Johanna Jakobsen (1904–1945).