时太尉宋由等人认为可行，但袁安认为当日汉光武帝让匈奴分裂是权宜的计策，以安定国家并让南匈奴汗国屏卫东汉。建议应该让南匈奴单于统一匈奴，招降余众；反对立阿柊为新单于。袁安后和窦宪互相诘难，窦宪更恃着其权势而对袁安人身攻击，抵毁对方，又以当年汉光武帝杀当时任三公的韩歆和戴涉之事恫吓袁安，但袁安坚持。窦宪最终都改立另一投降的右鹿蠡王于除鞬为单于。袁安见和帝幼弱，而外戚擅权，每天朝会进见和谈论国家大事时都会显得感慨悲叹，甚至流下泪来。袁安亦深得和帝和百官倚重，于是当袁安在永元四年三月癸丑日（92年4月9日）逝世