Porto Santo Stefano disponía sólo de una simple torre por lo que era enormemente vulnerable a los ataques desde el mar (sólo en 1607 se inician las labores para su fortificación).