Harrison contrajo matrimonio en dos ocasiones: con Pattie Boyd, de quien se divorció en 1977, y con Olivia Trinidad Arias, con quien tuvo su primer y único hijo, Dhani.