Boxer ble utdannet ved Wellington College og Sandhurst, hvor hans interesse for japansk språk og kultur ble vakt. I 1923 begynte en karriere i den britiske hær, som blant annet bragte ham til Japan (på grunn av hans språkkunnskaper). Han var som språkoffiser flytende i japansk, nederlandsk, fransk, tysk og portugisisk.