Ved dannelsen av Erna Solbergs regjering i oktober 2013 ble Pedersen utnevnt til statssekretær for finansminister Siv Jensen. Han ble da Høyres representant i Finansdepartementet hvor resten av den politiske ledelsen er fra Fremskrittspartiet.