Además del castillo, la villa de Ademuz contó con un cinturón de muralla que abrazaba la población, teniendo al menos cuatro puertas, de las cuales únicamente subsiste la del Portal de San Vicente.