的外祖父是雄略天皇，而祖父则是市边押磐皇子，两人为堂兄弟。当年雄略天皇杀害市边押磐皇子后，市边押磐皇子之子仁贤天皇（手白香之父）和显宗天皇逃亡避难。雄略天皇的继任清宁天皇无子，便将两人迎回宫中。为了消除父亲那代的仇恨，仁贤天皇政治联姻雄略天皇之女春日大娘皇女，并生下手白香皇女和武烈天皇。
婚姻.武烈天皇在没有留下儿女的情况下驾崩，而由于当年雄略天皇的血腥肃清，直系皇族几乎没有幸存者。为此，唯有立应神天皇的五世孙为继体天皇。507年4月2日，立手白香皇女为皇后，以增强继体天皇