En 1572 Fernando de la Cerda comenzó la construcción de una casona toledana que, apoyada en las murallas de la ciudad, elevó sobre éstas su fachada posterior, de marcado sabor manierista, con sillares a la rústica que facetan los enmarques de vanos.