到来都要求诗赋，金湜即席吟诵数十篇相赠，获得朝鲜珍重，收录编为《皇华集》。朝鲜又以国中美女相伺，金湜又以诗赋婉拒，对于朝鲜的馈赠也不收受。金湜回朝即上书请求归田，朝廷屡征不起。家居三十年，自号朽木居士，专心书法绘画，以画竹、石盛名，书法有晋人风致。在篆刻上也自成一家。与张应麒（明张楷子）等名士结诗社题咏为乐。其宅在月湖边，与境清寺相距不远，而当时日本派使节访问明朝都在境清寺驻扎，常有日本使者登门求墨。