El resto, cerca de 4000 personas, huyó a diversos lugares: la mayoría se trasladó a la ermita de San Roque, otros se instalaron en el actual Los Barrios y otros tantos se refugiaron en la despoblada Algeciras (abandonada desde 1379); todos ellos terminarían fundando el 21 de mayo de 1706 la «"Muy Noble y Más Leal Ciudad de San Roque, donde reside la de Gibraltar"», donde se conservan a día de hoy objetos importantes de la historia de Gibraltar, como una imagen de la Virgen Coronada, el viejo pendón traído en la huida o la cédula real de los Reyes Católicos que en 1502 había concedido el escudo de armas a la ciudad.