与兄顾问在墓旁搭盖小屋居住。先后大概长达十年。服除后起为礼部仪制司员外郎，改南京刑部员外郎，擢吏部稽勋司郎中。出为福建按察使司副使。不赴，旋即辞官返乡，时年三十八岁。返乡后穷心研究阳明心学，主讲阳明书院，学生长达数百人，方技杂流，亦不拒绝。同兄顾问、余姚王畿、钱德洪，南昌李材、吉安罗洪先、盱眙罗汝芳、东粤海瑞、安福邹德溥、丹阳姜宝、黄安耿定向、耿定力等人讲学底行，数往来庐山白鹿洞书院讲学。有“天下清绝，顾问、顾阙。”的美誉。被明朝思想家李贽誉为：“楚理学之着者也。”家居四十七年，于万历四十一年（1613年）