En Sesa había un castillo que estaba en la peña del castillo (hoy calle del Castillo) encima de la actual iglesia de San Juan.