En 1204 se le nombra como "Sancta Maria del Olmo" y en 1591 aparece citado como "Nuestra Señora del Olmo", pero desde 1759 se le conoce ya simplemente como "El Olmo", pasando a formar parte de Barbolla en 1847.