Pave Johannes Paul II kreerte Panafieu til kardinal den 21. oktober 2003. Frem til sin pensjonering var han medlem av Det pavelige råd for interreligiøs dialog og Det pavelige råd Justitia et Pax.