Den 8. januar 1979 trådte han tilbake som biskop av Würzburg, i en alder av 71 år, og døde tre måneder senere.