南宋绍熙三年（1192年），随父岳霖居广州，十月岳霖病故于广州，岳珂即随家北归，将父亲安葬在宜兴唐门。

庆元元年（1195年）岳珂回到庐山脚下的江州家里，并在九江读书。

1198年八月，岳珂参加洪州（今江西南昌）漕试中举。嘉泰三年（1203年），岳珂一边读书一边整理岳飞遗文，撰写《吁天辨诬录》《天定录》并五言百韵上书宋廷。

第二年，岳珂赴京省试，开始在京都与岳飞的同事