中的各1万石分给弟弟土井利长和，另一弟弟也获得5,000石，古河藩也因此由16万石下降至13.5万石。正保3年（1646年），利隆为了祈求利胜的冥福而在放置大钟。然而，由于利隆自少受到利胜的宠爱，完全不及其父亲有才能和聪明，而且平常作恶多端，毫不理会家老的谏言，继而我行我素的利隆甚至强行要求仁兵卫隐居，但仁兵卫反过来要求利隆隐居，最终在这场政争中仁兵卫以死相谏而结束，然而土井家的纪录中并没有仁兵卫自杀的纪录，说法真假未明，而根据古河市的乡土史家冈村实的研究显示，仁兵卫的确是自杀的。随着仁兵卫自杀，利隆变