Han søkte om å få fratre som biskop da han var vel oppe i årene, og fikk dette innvilget i 1981 av pave Johannes Paul II Han bodde i Charlestown på Nevis til 1990, deretter på hjemøya Dominica.