En el centro del pueblo, en lo alto de una peña, se encuentran las ruinas del antiguo castillo de Íllora, aunque de él apenas se conservan algunos restos de las murallas.