就回朝了。薛徽言师从胡安国，学习《春秋》。后来其子薛季宣写信给朱熹时，也提及了这段师生关系。
回朝为官.绍兴六年（1136年）二月，以左宣义郎守比部员外郎，后又改兵部、吏部员外郎。八月，因金军进逼，随高宗出逃建康。绍兴府行宫留守秦桧奉召入朝，想留在朝中，希望赵鼎留下自己，但赵鼎无意。薛徽言对赵鼎说不要让秦桧离京，以免报复，赵鼎没有会意，却以为薛徽言得了秦桧的好处在为秦桧说话，疏远了他，也从此与秦桧生隙。薛徽言回京后对时事知无不言，声望大增。绍兴七年（1137年）五月，由吏部员外郎迁