En el catastro de Ensenada del año 1752, ya aparece nombrada como Casa del Olmo y se dice que tiene 2 vecinos (dos cabeza de familia, por lo que unos diez habitantes) y que pertenece como aldea a Alarcón: