Zamek wzniesiony został w drugiej ćwierci XIV wieku jako siedziba wójta. Zlokalizowany został na półwyspie jeziora Sobowidzkiego, przy starym trakcie Gdańsk-Starogard. W czasie wielkiej wojny Polski z Zakonem (1409-1411) zamek zajęli Polacy, po czym powrócił do Zakonu. W 1456 na zamku rezydował wójt Vogt von Slubitz. Podczas wojny trzynastoletniej (1454-1466), pomiędzy 10 a 20 lutego 1454 roku Krzyżacy poddali go wojskom Gdańska, które następnie go spaliły. Po zakończeniu wojny odbudowano jedynie dwór mieszkalny, w którym mieszkał starosta sobowidzki.