El templo se denominó de esta forma pues albergó la cruz de roble que Pelayo, el padre de Favila, portaba en la batalla de Covadonga y que más tarde se convertiría en La Cruz de la Victoria.