El príncipe Hiroyasu nació en Tokio con el nombre de príncipe Narukata, hijo mayor del príncipe Fushimi Sadanaru (1858-1922) y de la princesa Arisugawa Toshiko (1858-1930), hija del príncipe Arisugawa Taruhito.