Este castillo no fue la primera vez que habitaba esa zona, ya que se han encontrado cuevas en la zona del balneario de La Puda restos prehistóricos, más concretamente cerámica, puntas de lanzas, fragmentos de sílex, herramientas hechas con piedras, etc...