瑞和之长孙，户部主事高钊之子。润生为人至孝，幼年时丧父，寝苫枕块，哀痛废读。叔父高鑑劝导润生努力读书，以报其父泉下之志，并延请宿儒为其授课。在名师教诲之下，润生学业日渐精进，光绪八年（1882年）选副贡，光绪十一年（1885年）参加乙酉科顺天乡试，中举人，光绪十五年（1889年）中式会试，次年（1890年）补应庚寅恩科殿试，位列三甲第一百零七名，赐同进士出身。同年五月，改翰林院庶吉士。光绪十八年五月，散馆，授翰林院检讨，任国史馆纂修。光绪二十七年（1901年）转升江南道监察御史，“正色立朝，不避权贵