城墙原分为规模相近的南北两城，两城隔姚江相望，中有通济桥沟通，今仅存北城南门城楼舜江楼、楼基处城墙及南城南门南溟门城门洞。
历史.余姚为秦始皇三十七年（前210）置县，初属会稽郡，后相继属越州、绍兴府。东汉建安五年（200）吴将朱然任余姚长时主持修建北城城墙，位于姚江北岸、龙泉山以东，城围一里二百五十步，高一丈，厚两丈。元至正十七年（1375）方国珍率众扩建，逾月而成，将城西龙泉山围入，城围一千四百六十五丈，高一丈八尺，城基宽两丈，内外均为石砌。明洪武二十年（1387）汤和命绍兴后