上杉家家臣の渋谷基永の子として生まれ、上杉謙信、景勝に仕えた。関ヶ原の敗戦後、上杉家を浪人するも、直江兼続の請いでその嫡男景明の守役となる。慶長19年（1614年）、大坂の陣に息子永基と共に出陣し、戦功を立てる。慶長20年（1615年）、直江景明が夭折し、直江家を離れた。その後、景明の舅であった戸田氏鉄に家老として招かれ、1000石で仕える。