Por último queda por hacer un breve comentario sobre su castillo, construido sobre los imponentes farallones en los que antes estuvo el asentamiento castreño. Según las fuentes, de, a comienzos del siglo XIII era propiedad de la diócesis de Zamora, pasando a ser después de Doña Urraca y plaza fuerte en la guerra de las Comunidades frente a la vecina Portugal, llegando a ser tomado por las tropas portuguesas en 1654. Parece ser que en el siglo XVIII es objeto de distintas reparaciones por el ingeniero D. Benigno Garrido Marcos, sin embargo, el proceso de ruina, por un lado, y las desafortunadas construcciones realizadas en su solar y entorno han provocado que los vestigios se limiten a pequeños lienzos de muralla en su lado meridional. Junto a ellos quedan restos de una puerta denominada "la del Villar" o "el Arco" por conservar de ella el arco apuntado.
Estos exiguos restos tienen protección específica con categoría de Bien de Interés Cultural derivado del Decreto 22 de abril de 1949 sobre Castillos Españoles (BOE de 5 de mayo de 1949).
Autores: Larren Izquierdo, H. Pichel Ramos, L.
GÓMEZ MORENO, M. (1927): Catálogo Monumental de la Provincia de Zamora. Madrid (red.
León, 1985).
LARRÉN IZQUIERDO, H. y PICHEL RAMOS, L. (2010) Bienes Culturales en la provincia de Zamora. Junta de Castilla y León, Zamora.
LOBATO VIDAL, J.C. (1997) Castillos y Murallas de la Provincia de Zamora, Zamora.
RAMOS DE CASTRO, G. (1977): El Arte Románico en la Provincia de Zamora, Zamora.
Fecha y hora

Fecha 4/2/2016
Hora 18:01:03

.
Datos del Bien Inmueble

Referencia catastral 49076A029000280000PF
Localizacion	Poligono 29 Parcela 28
Clase Rustico	CASTILLO.FERMOSELLE (ZAMORA)
Coeficiente de participación 100,000000 %

Uso Agrario

.
Datos de la Finca en la que se integra el Bien Inmueble.
Cultivos

Poligono 29 Parcela 28 Localización CASTILLO. FERMOSELLE (ZAMORA)

Subparcelas	Clase de Cultivo	Intensidad Productiva	Superficie (Ha)
0	AM Almendro secano	00	1,3421