Entre las leyendas del castillo se encuentran las que hacen alusión a los numerosos pasadizos secretos que comunican la fortaleza con diversos puntos de la localidad como son la rambla de Oscayar y los molinos.