Avant, pendant, et après les Croisades, la République de Venise, à l'instar des Génois, s'occupa à étendre son emprise commerciale, quitte à conquérir des territoires pour s'en faire des comptoirs. La Crète tomba ainsi dans le giron vénitien. Lors de la Quatrième croisade, une lutte éclata entre les villes italiennes de Gênes, Pise et la République de Venise. Finalement, Venise en sortit vainqueur. La tour byzantine, encore en place, fut certainement aménagée aux besoins des soldats de Venise au début du . On ne sait pas précisément quand les Vénitiens lui destinèrent un rôle mais la plus vieille documentation à son sujet est une description de la tour dans les travaux du moine florentin Cristoforo Buondelmonti, datant de 1417.