Pave Pius XII utnevnte ham den 4. juli 1958 til apostolisk vikar av Daijeon (Daejeon), en by som under Koreakrigen i en tid var Sør-Koreas hovedstad. Den 10. mars 1962 ble Daijeon bispedømme, og med dette ble Larribeau dets første ordinarie biskop.