Den 7.november 1972 ble Frey utnevnt til biskop av Lafayette, og han ble innført i embedet den 7. januar året etter.