。祖父是大和国春日神社的金春流猿乐师，在播磨国大藏开创了大藏流。大藏长安亦在此时出生。
武田家臣时代.其父大藏信安做为猿乐师曾经流落至甲斐国，并成为当时武田信玄首席的猿乐师。但信玄在见到大藏长安却将他从猿乐师拔擢为武士，并做为土屋昌次的与力，姓氏亦从大藏改为土屋。但信玄并不将长安培养成战士，而是看上了他的经营才干，打算将武田领地中的黑川金山等矿山开发的税务及庶务行政官一职交给他。信玄死后，长安成为武田胜赖的家臣。在天正3年（1575年）的长篠之战中，土屋昌次及长安兄新之丞皆战死