El edificio fue mandado construir por Ramiro I como palacio, siendo acabado en el año 842 d. C., formando parte de un complejo arquitectónico que también comprendía la cercana iglesia de San Miguel de Lillo, erigida a tan solo cien metros de distancia.