。高元海常常说高归彦的坏话，高归彦谋反被杀。河清二年（563年），和士开诬告高元海，武成帝命令打高元海六十下马鞭，斥责说：“你以前唆使我反叛，以弟弟反叛兄长，多么不义！用邺城的兵力抵抗并州，多么愚笨！”贬出朝廷为兖州刺史。武平三年（572年）二月初九，齐后主任命高元海为尚书右仆射，祖珽想要独掌朝政。高元海后妻是陆令萱的外甥女，高元海屡次把陆令萱的密话告诉祖珽。祖珽想要做领军，齐后主同意了，高元海秘密上奏：“孝征（祖珽）汉人，两目又盲，岂可为领军！”并说祖珽和广宁王高孝珩有勾结，因此中止任命。祖珽向后主自辨：