Prins Takahito ble født i Keiserpalasset i Tokyo. Som barn ble han kalt . Han gikk fra 1922 til 1932 på gutteskolen til Gakushuin-skolene. Da han begynte på videregående skole hadde hans eldste bror allerede besteget krysantemumtronen, det vil si arvet keisertronen etter faren. De to andre brødrene, prinsene Chichibu og Takamatsu, hadde begynt på militære karrierer; den ene i den keiserlige hær, den andre i den keiserlige japanske marine.