Fue construido entre 1541 y 1603 por orden del cardenal Tavera.