宗徐等劾奏“黩货纵贼，贻患地方”，“回借听勘”，范钦见国政日非，遂辞归乡里。范钦友爱诸弟，致仕归乡后，兴建祖祠，对亲族多有照顾。其生性爱书，每到一处，即刻意蒐集当地的各种刻本，无法购买，就僱人抄录，并兴建天一阁，将书籍分门别类收藏。当时同乡张时彻、屠大山均家居，范钦与二人多有唱和，人称“东海三司马”。
天一阁.嘉靖四十年（1561年）范钦“于其宅东月湖深处，构楼六间以为藏书之所”，建立了私人藏书楼，并以《易经》中“天一生水，地六成之”之意，取名天一阁，有藏书七万多卷。范钦临终时