El templo se denominó de esta forma pues albergó la cruz de roble que Pelayo portaba en la Batalla de Covadonga y que más tarde se convertiría en La Cruz de la Victoria.