期间，任集贤殿直提学。1455年，端宗被世祖篡位，并被流放到宁越。他不顾危险，前去流放地问候端宗。1457年，端宗被世祖逼迫自杀后，他辞官退隐，回到原州。世祖以户曹参的官职希望他重新出山，被他拒绝，隐居直至逝世。其孙元叔康在睿宗在位期间出仕，参与《世祖实录》的编纂，对世祖大肆屠杀大臣秉笔直书。