En el siglo XVI el castillo es reconstruido por orden del obispo Pedro de Montoya.