定后11月还师。论功翌年位阶，勲等再进，升从三位勲二等。神龟3年（726年）以式部卿兼知造难波宫事。成为后期难波宫营造的责任者。此后天平元年（729年）长屋王之变时也以式部卿身份所对应。天平4年（732年），以参议・式部卿身份任西海道节度使。当时诗文《怀风藻》中所录、高桥虫麻吕送别的歌在《万叶集》中也有编入。天平6年（734年）正三位。天平9年（737年）农8月5日薨去。最终官位为参议式部卿兼大宰帅正三位。