Uglands første kone var Liv Blom (f. 24. mars 1922). Sammen fikk de barna Jørgen Ugland, Lars Torgeir Ugland og Gerd Jorun Ugland. Liv døde i en bilulykke i Spania 7. november 1986. Hans andre kone var hans 32 år yngre sekretær Ellen Ugland fra Arendal. De giftet seg 15. mai 1989.