天保七年（556年）大尔朱氏去世时，高浟解除官职，其后又奉诏复回本身官职。再拜司空，兼尚书令。高洋子高殷嗣位后，除开府仪同三司、尚书令、领大宗正卿。皇建元年（560年）八月，高演下诏拜高浟为大司马，兼尚书令，次年转为太保。当武成帝高湛登基后，迁任太师、录尚书事。高浟明练世务，果于断决，事无大小，咸悉以情。赵郡李公统参与高归彦的谋反，其母崔芷蘩即为御史中丞崔昂堂姐，兼右仆射魏收夫人的堂妹。依遵法令，年过六十者，按例可以不必发配宫中服刑役。崔芷蘩改大自己的年龄，所负责官员因崔昂和魏收的缘故，崔芷蘩因此得到赦