地缘之故，麾下士兵有不少是伊贺忍者、因此服部半藏被后世视为忍者的代表人物之一，但其实服部家族是不折不扣的武士。
历史中的服部半藏.服部家是伊贺国的豪族。服部正成之父服部保长为第一代，原侍奉足利义晴，离开伊贺后到了三河国仕奉松平氏，相继侍奉了松平清康、广忠、家康 三代。保长的长子服部正成继承了服部家当主「半藏」的名号，正成侍奉德川家康时屡立战功、表现勇勐而有「鬼半藏」的美称。正成虽为武士身份但因地缘关系多率领忍者行动、后世记载他的事蹟多是率领忍者众进行放火等秘密活动。此外