民众面前施展「呑牛之术」令民众十分惊恐害怕，其术乃一口气将牛吞饮之术，催眠术一种。曾经有一次、受谦信的命令前往敌对大名家夺取名剑，段藏不只夺取了名剑，还将服侍此大名的童女也活捉后献给谦信。关于这个故事，也有一说并非是赴敌对大名家，而是谦信的笔头家老直江景纲家夺取家宝大薙刀。直江知道消息后，立即于庭园备有严密守卫、警卫犬防范欲取其命，段蔵事前早察知并施逢犬之术毒杀警犬后带着直江家的女儿一起离开云云。自从这件事后，谦信对他相当惊恐且警戒，开始疏离他，甚至下令大和守暗杀他，于是他离开了上杉家，转而投效武田信玄