家人大部分跟了过去，只有几个家人留在季家庄看护宅院。最小的叔叔去了蜀州做生意，不过留了家人在家，听说过几年回来。

在季家庄的兄弟四人，最大的伯伯二年前在家因病去世，二伯伯年纪大了，六叔在家务农，他们一般都不管事，家中大小事情主要是大房大哥袁暮和五叔袁庭在应对处理，五叔对外，大哥对内。

袁睿祖父幼年进学，一直无成，成为毕生遗憾，在家里务农后，也是心里挂念着科考，所以对儿子非常严厉