担任伏见城番，在元和5年（1619年）转封至远江久野。在宽永17年（1640年）被加增转封至下总关宿2万石。在宽永21年（1644年）加增转封至骏河田中2万5千石。最后在庆安元年（1648年）领有挂川3万石，因为没有生下儿子，在死后被改易。此后由义兄繁广（氏胜的实弟，后来成为其养子）的家系以旗本身份存续。