Dyre Wisløff Halse giftet seg i 1944 med Anna Lundemo (1918–1984), og sammen fikk de en datter, Karen Anne Halse (1945–1999). Halse døde 20. september 1994 i Asker og ble gravlagt på Asker kirkegård.