Klokketårnet ble bygget som en del av festningsverkene i det 14. århundre. I oppdrag av flamske grever og burgondiske hertuger fikk Sluis den gangen også rådhus, voller, bymurer og tre byporter. Den første stenen ble lagt i 1386, og på de fire hjørnetårnene vaier faner med Burgunds, Flanderns, hertugens og byens våpen. I middelalderen var et slikt tårn et viktig symbol for selvstyre, rikdom og makt. I et belfort ble ofte viktige forseglede dokumenter oppbevart.