Ya en 1963 se había divorciado de Carola Aubry Bravo, con quien tuvo tres hijos: Carolina Belaúnde Aubry, Rafael Belaúnde Aubry y Fernando Belaúnde Aubry.