岳霖因而能够对自己多年搜集的有关其父的文稿，进行增删和考订。其稿将成，因患重病，未及向朝廷送审，弥留之际，执其子珂手，说：“先公之忠未显，冤未白，事实之在人耳目者，日就湮灭。余初罹大祸，漂泊囚缧。及至仕途，而考于见闻，访于遗卒，掇拾而未及上，余之罪也。子能成吾志，雪尔祖之冤，吾死瞑目矣！”
岳霖尝宦游广州，道出江西，父老率其子弟来迎，皆涕泪说："不图今日复见相公之于！"众皆感泣，霖也泣下。官至朝请大夫，敷文阁侍制，赠大中大夫。
霖在父兄遇难后同母亲李氏夫人、次兄雷一道被流放岭南。霖有3子：琮、琛、珂。据已知资料，长子岳琮、三子岳珂两支后裔繁衍最广。岳琮一支分布在江苏宜兴、甘肃永泰、山西洪洞、河南洛阳（寺里碑）、巩县、温县等地。
岳珂（1183-1234年）岳霖之三子，字肃之，号亦斋，又号倦翁。少善属文，雄健成一家语。著有《金佗粹编》二十八卷和《金佗续编》三十卷，辑集有关其祖岳飞的资料。是研究岳飞和南宋历史的重要著述之一。并著有《刊正九经三传沿革例》、《裎史》、《愧郯录》及《玉楮集》等。官至嘉兴府知府，封朝请大夫，权尚书、户部侍郎，通城县"国男。
岳珂一支分布在山东阳谷、梁山、莘县、东平，河南台前、清丰、汤阴，安徽砀山，江苏丹阳，山西介休，江西南昌，河北张家口等地。一是甘肃庄浪（今甘肃平番县）永泰岳琮后裔，系由江苏宜兴陈渡迁到甘肃庄浪永秦堡，后称永泰世系。传至19世岳镇邦，为清康熙年间左都督绍兴总兵。镇邦长子岳升龙。
康熙三十五年（1696年）历任四川提督，卒谥敏肃。升龙弟超龙，雍正年间任天津总兵、湖南提督。升龙子岳钟琪，文武全才，在康熙、雍正、乾隆三朝镇守西北边关。乾隆帝称之为"三朝武臣巨擘"。钟琪有五子，均在朝廷任职。其后到25世，已到民国时期。仍多从事公职，为国家效力。
