El año 1804 ya encontramos que aparece Casa del Olmo en el “Mapa Corográfico de la Provincia y Obispado de Cuenca, en Castilla La Nueva” de Mateo López.