Na lewym brzegu Niemna znajduje się Góra Zamkowa z grodziskiem z resztkami zamku. Gród funkcjonował w tym miejscu od III wieku p.n.e. do IX wieku n.e. W XI wieku miał tu powstać nowy gród - Nowogródek - siedziba i miejsce koronacji księcia Mendoga. Na początku XV wieku książę Witold polecił zbudować tu murowany zamek, z którego do naszych czasów ocalało przyziemie okrągłej wieży o średnicy 11,5 metra i grubości 3,5 m. Duży wykop pod inną wieżę znajduje się w odległości 27 m od niej, ale jej budowy zaniechano, przypuszczalnie po klęsce Zakonu Krzyżackiego w Bitwie pod Grunwaldem, co oddaliło zagrożenie najazdami tych terenów. Obok wznosi się Góra Kościelna, na której istniał kamienny kościół, z którego pozostały jedynie fundamenty budynku.