永禄5年（1562年）出生，父亲是近江国浅井郡的土豪渡边右京。后来成为同族渡边任的养子。最初仕于浅井氏麾下的阿闭贞征并娶了贞征的女儿。是被称为「枪之勘兵卫」的使枪名手，在进攻摄津国吹田城时立下一番首的战功，受到织田信长直接赞赏，于是成为阿闭家的精鋭母衣众的其中一人。后来辞呈后在天正10年（1582年）仕于羽柴秀吉并领有2千石，从属于秀吉的养子羽柴秀胜。在山崎之战和贱岳之战中活跃着，与石田三成的家臣杉江勘兵卫、田中吉政的家臣辻勘兵卫并称「三勘兵卫」，不过在天正13年（1585年）秀胜死去后成为浪人。接