前往下野。此后成为德川秀忠的家臣，被赐予5千石。在庆长5年（1600年）的关原之战中，跟随秀忠军攻撃真田昌幸守备的信浓上田城，因为这次战功，在战后成为常陆牛久1万石大名，在庆长11年被任命为大番头。但是在庆长18年（1613年），大久保忠隣的养女（石川康通（或石川忠义）的女儿）与嫡男重信擅自结婚，因此遭到幕府问罪并改易，于是被逼在武藏的龙稳寺中蛰居。这次事件是受到在大久保长安死后的大久保长安事件的牵连。在蛰居后亦极希望能复兴山口家，在翌年的大坂之役开始时，向德川家康进言「让自身加入丰臣氏后，暗杀丰臣