En contraste, estaba muy apegado a su segundo hijo, el príncipe Alberto, y adoraba a su nieta mayor, Isabel; a quien apodaba «Lilibet», mientras que la niña le decía cariñosamente «Abuelo Inglaterra».