Den 30. januar 1974 trakk Ernest John Primeau seg tilbake fra embedet som biskop av Manchester. Han var da 65 år gammel. Han hadde ofte gitt uttrykk for sin oppfatning at biskoper skulle trekke seg tilbake i den alder. Således ble han den første av de til da seks biskoper av Manchester som fratrådte fra sitt embede.