La fachada principal, que da a la plaza del Ayuntamiento, se inició en tiempos del cardenal Tavera, en 1543, y su diseño se debe a la mano de Covarrubias.