În secolul al XI-lea cartierul găzduia comunitatea evreiască a orașului, care ajunsese la un număr de aproximativ 2.500 de persoane. În 1171 o nouă așezare genoveză din zonă a fost atacată și aproape distrusă. În ciuda faptului că genovezii susțineau că Veneția nu avea nimic de-a face cu atacul, împăratul bizantin Manuel I Comnen (1143-1180) a folosit atacul asupra așezării ca pretext pentru a-i întemnița pe toți cetățenii venețieni și a confisca toate proprietățile venețiene din Imperiul Bizantin. "Kastellionul" și cartierul evreiesc au fost acaparate și distruse în 1203 de cruciații catolici în timpul Cruciadei a patra, cu puțin înainte de prădarea Constantinopolului.