Da kardinal Panafieu den 26. januar 2006 fylte 75 år, som er den alder som kirkeretten ber biskoper om å tilby paven sin avskjed, sendte han sin avskjeds­søknad til pave Benedikt XVI (2005-13). Søknaden ble innvilget den 12. mai samme år. Hans etter­følger ble i 2006 Georges Paul Pontier.