El elemento más singular del conjunto es la torre-mirador, que al ser la más alta de la ciudad se convirtió en 1778 en vigía oficial del puerto gaditano, tomando su nombre del primer vigilante, Antonio Tavira.