El club fue relegado nuevamente la siguiente temporada a la Tercera División (Sur), donde no logró buenos resultados hasta que Scott Duncan fue reemplazado por Alf Ramsey en 1955.