备等人联系，成为一大新兴势力。但因遇到藤原广嗣之乱，恭仁京经营失败以及营建大佛困难等问题，755年又遭到藤原仲麻吕的抑制（被告发在酒宴上诽谤朝廷），遂一蹶不振，隔年向当政的圣武天皇辞职后隐居，朝中大权几乎转移给藤原仲麻吕。757年橘诸兄失意过世，其子橘奈良麻吕面临仲麻吕对橘氏的全面进攻（要将橘氏彻底赶出朝廷），愤而在同年发起，但迅速失败被杀。藤原仲麻吕大权独揽后，拥立傀儡天皇淳仁天皇。《万叶集》载诸兄的诗共八首。