己还在东都洛阳时，让唐休璟留守首都长安，再封唐休璟为宋国公。唐休璟在706年致仕，但他不想早早引退。当时，尚宫贺娄氏干预国政，唐休璟为其子娶贺娄氏养女为妻， 708年起复为太子少师（当时并无太子，太子少师只是荣誉官职）。这年，朔方道大总管张仁愿在河套平原的黄河北岸修筑受降三城以控制突厥，唐休璟反对，以为两汉以来都是以黄河阻挡胡人，在草原筑城，最后还是会落入突厥之手。但三城还是被筑成，有效地控制了突厥人。709年冬，他又被任命为同中书门下三品，很多人批评他不能保持晚节（当时他已经八十三岁），但是他将数千匹