Como consecuencia de ello, la actividad en el puerto se quedó en un segundo plano frente a la estación de Pajares, debido a las precarias comunicaciones que conectaban el puerto de San Isidro con León y Asturias; esto no obstaculizó que el puerto comenzase a tener cierta actividad montañera no ligada al esquí, construyéndose a lo largo de la década de los sesenta dos albergues de montañeros en el alto del puerto.