I 1204, etter det katastrofale fjerde korstog som herjet Konstantinopel, kom øya inn under besittelsen til den italienske Ghisi-familien fra republikken Venezia. Skopelos ble setet for de venetianske baronene, inkludert Filippo Bizzi, og de bygde en festning over landsbyen. Ruinene av festningen er fortsatt synlige.