El Padre Juan Ruiz, en su obra histórica sobre esta villa, supone que hubo, en el lugar de la actual iglesia un castillo o torre.