El pabellón de Carlos V fue construido entre 1543 y 1546 por Juan Fernández.