El castillo se ubica en el propio casco urbano de la localidad.
Pinilla (1970) aporta la siguiente descripción:
“El conjunto se compone de un cuerpo de edificio rectangular, de gran amplitud (31,40 por $1 1 { , } 4 0 ~ \mathrm { m } .$ ) con un espesor de muro de $^ { 2 , 2 0 \mathrm { ~ m ~ } }$ . El interior, hoy desmantelado, estaría dividido en tres plantas delas cuales recibirían luz por grandes ventanales adintelados. La puerta de acceso estaría en la pared del muro actualmente destruido que da al pequeño patio de armas. Tampoco podemos determinar por su estado actual, como se cubriría ni tampoco si estaría rematado por almenas.
El patio de armas formaría un rectángulo, dos de cuyo lados pueden ser considerados como una prolongación de la muralla de la villa, que forma aquí un ángulo recto, encuadrando así el edificio principal, de cuya cara Sur arranca un muro que forma el cuarto lado del patio de armas, en el que se abre la puerta. En el cruce de este muro con la muralla hay un pequeño cubo de cuatro metros de diámetro. La muralla se prolonga, abriéndose en ella la puerta llamada del río única que queda de las cuatro que daban acceso a la villa.
Queda también en pie restos de un muro de aspillerado que protegía la fachada Este del edificio, uniéndose con la muralla por el Sur y prolongándose por el Norte, rodearía así la fachada Norte del cuerpo central, quedando ésta completamente protegida por sus cuatro frentes por un pequeño recinto exterior.
La construcción es de mampostería de pizarra, excepto las esquinas y las puertas y ventanas que están hechas de sillería de granito.
Este mismo autor incluye este castillo en el grupo de torres defendidas por recintos exteriores.
Para García Muñoz et alii (1991) hace una recapitulación de toda la información bibliográfica y apunta:
“Gómez Moreno piensa que este palacio-alhóndiga o castillo de la Mora Encantada fue obra realizada en el siglo XV mientras que Enríquez de Salamanca apunta que la muralla parece ser obra del siglo XVI. (...) Pinilla no ha encontrado restos arquitectónicos suficientes para poder fechar la construcción; a pesar de ello piensa que la muralla es del siglo XIII y el castillo pudo ser alzado en el siglo XV.”
Este autor no obstante opina que se aprecian dos épocas constructivas: la más antigua de fábrica de mampostería de pizarra y la más moderna de fábrica de mampostería de cuarcita y pizarra.
Datos tomados de las fichas de inventario.