El desarrollo de la villa a finales del siglo XII, hizo que se construyera un castillo para proteger la frontera portuguesa (Castelo de Penamacor), del que hoy en día hay vestigios y está considerado monumento nacional.