La compraron los canónigos de la catedral de Toledo hacia 1505 y años más tarde fue cuando a instancias del cardenal Cisneros decidieron ampliarla con la gran obra de Enrique de Arfe.