（不过有说法指出，可能近江佐佐木氏一门出身‧将军的近臣细川高久，或淡路守护家细川晴广才是养父）。 天文15年（1546年），接受将军足利义藤（后来的义辉）的偏讳，于是改名为藤孝。天文21年（1552年），叙任从五位下兵部大辅。以幕臣身份仕于将军义辉。永禄8年（1565年），义辉在永禄之变中被三好三人众和松永久秀杀死，义辉的弟弟一乘院觉庆（后来还俗并改名为足利义昭）亦被幽禁在兴福寺，此时与兄长三渊藤英等人一同将其救出，为了请求近江国的六角义贤、若狭国的武田义统、越前国的朝仓义景等人帮助义昭成为将军而奔走。