时值吴浚掌权之际,朝中阿谀成风，同僚尸位素餐，官场风气败坏,他不顾亲朋劝阻,以奉养老母为名辞官回乡，先是在家乡开了一家书院,将名下的田产作为义田,供书院开销。后来书院入不敷出,他便开始研究农事，提高农作物的产量,为家乡百姓做出了不少贡献。又因为高风亮节、刚正不阿的品行和事迹，在家乡乃至全国都有着极大的名气。

此次进京，是受到郑阁老的邀请，郑阁老欲将他起复，去户部督理农事。