正18年（1590年），因为抵抗丰臣秀吉的小田原征伐，于是被。此后，成为浪人。后来因为佐竹氏家臣人见藤道推举，仕于佐竹义宣。以20岁之龄，继承曾是佐竹家重臣的澁江氏，改名为澁江内膳政光（一说指名字中的「政」字是以前小山秀纲的儿子政种所赐的偏讳）。在关原之战后，义宣在被减封至秋田的佐竹家中进行改革。庆长8年（1603年），被提拔为家老。不过因为原本是其他家的旧臣，于是引起佐竹谱代家臣的不满，家老川井忠远等人企图暗杀义宣和自身，最后忠远等人被肃清（）。因此，被昇格为家老一事暂时被搁置。庆长12年（1607年