Han var oppkalt etter den hellige Frans av Assisi, og hadde et nært forhold til sin mor. Han bodde hos henne i Odense på Næsbyhoved slott inntil han kom til hoffet i København i 1509.