Allí permanece en los siguientes años, llegando a rozar el ascenso a la Segunda División en la temporada 55/56, pero a pesar de ello el club no contaba con el apoyo suficiente del público, lo que hizo que los altos cargos se planteasen adherirse al Sevilla Fútbol Club, debido a la gran relación tanto institucional como deportiva que tenían ambos clubes.