Las obras se comenzaron en 1580 dirigidas por Juan Bautista Antonelli por mandato del rey Felipe II, pero pronto se paralizaron por falta de recursos, con tan sólo 6 metros levantados de pared.