由正光养育，后来名为保科正之，并继承了保科家。在养育正之的功绩下领土加封5000石。1636年正之被幕府移封到出羽国山形藩，继任的藩主是鸟居忠春，之后由鸟居忠则继承，忠则在1689年突然死后，鸟居氏的继承者鸟居忠英被改易到能登下村藩。该地成为了幕府的天领，1691年内藤清枚被分被到这里，高远藩再次立藩。由第二代藩主内藤赖卿起，开始财政出现危机。这个时候开始进行藩政改革，此时亦发生了江岛生岛事件。到了第七代藩主内藤赖宁开始实行鼓励发展产业、教育、开发新田发经营桑园，因而改革成功，但是该地百姓报来因草鞋暴动