时百官多数认为匈奴狡诈，贪得无厌，一旦获送还俘虏就会妄自夸大，因此反对孟云建议；但袁安则以北匈奴不但派使者来和亲，亦送还俘虏，正显示他们不是违背和约，而更彰显其畏威。而且孟云作为边将不应失信于外族，送还俘虏令边境安定，亦显得汉朝的寛容。当时司徒桓虞赞同，太尉郑弘和司空第五伦大力反对，郑弘更说：「所有说应该送还俘虏的都是不忠！」刺激桓虞，但遭桓虞当众指责。最终汉章帝都听从袁安的意见。元和三年（86年）五月丙子，袁安升任司空。四年（87年）六月己卯升任司徒。
不畏强权.89年，章帝