延历二十三年（公元804年），进爵为从四位上。之后又一次渡海出使唐朝，佛教高僧最澄、空海也在出使团队之中，在大殿上举行饯行宴会的时候，天皇下令奏乐，并赐给藤原葛野麻吕宝琴一张。经过十个月的旅行，遣唐使团一行抵达长安（今西安），藤原葛野麻吕在宣化殿谒见了唐德宗。延历二十四年（公元805年），恰逢唐德宗驾崩，唐顺宗即位，后来使团一行返回日本，藤原葛野麻吕因为出使唐朝的功劳被进封为从三位，位列公卿。大同元年（公元806年），出任参议、兼任式部卿，又担任东海道观察使，不久担任中纳言，进封正三位，兼任皇太弟傅。大同五