Han måtte fratre bispetjenesten i Fukuoka 16. januar 1941, da det prestelige ansvar for misjonen ble overdratt til kanadiske sulpicianere, som hadde etablert et presteseminar der. Hans etterfølger som biskop ble japaneren Dominic Senyemon Fukahori.