Hirose studerte ved den keiserlige japanske marine-akademiet i Etajima, og derfra ble han uteksaminert i 1889. Hans far Hirose Shigetake var dommer, og storebroren Hirose Katsuhiko ble kontreadmiral.