La primera fortificación, La Fortaleza, comenzó a construirse en 1533 y actualmente sirve como mansión del gobernador. El Castillo San Felipe del Morro, o El Morro para abreviar, fue la segunda fortaleza construida en el islote de lo que hoy es el Viejo San Juan y Puerta de Tierra.