Gikk tilbake til Swansea i 1983 og var der til 1986. Rimmer var en kort periode manager i Swansea på midten av 1990-tallet. Har også vært keepertrener i klubben og for .