En el año 1083 fue reconquistado Buitrago del Lozoya por Alfonso VI, y 13 años después también El Atazar, que seguramente fueran tan solo cabañas.