岳飞生五子二女:长子岳云、次子岳雷、三子岳霖、四子岳震、五子岳霆，长女岳安娘、次女岳银瓶。岳飞因力举抗金，收复失地，迎还二圣，得功了偏南保位的宋高宗赵构和被金人俘掳又放还南宋的内奸秦桧，末于死于奸臣秦桧诬蔑的"莫须有"毒手，被具浴拉胁而殂于杭州大理寺风波亭。
岳云和部将张宪同时惨遭毒手，被秦桧一伙奸贼诬蔑谋叛功被斩于杭州官巷口枣木巷 (现寡安桥曲街六十九号)，岳云死年仅二十三岁，张宪①死时年龄不详。
岳飞身后。狱卒隗顺负其遗体逾城至西湖北山九曲从祠傍暗葬，树双橘树做标识表记标帜②，墓前树碑《贾恼人之墓》以假装。
岳飞遇害时， 夫人李氏四十一岁， 身边有长媳巩氏二十二岁及长房幼孙岳甫四岁，岳大娘三岁、岳申一岁。次子岳雷十六岁、次媳赵氏及次房幼孙女岳二娘一岁，随李夫人充军岑南③。在解押岭南时，初不准年幼的岳甫、岳申等与母巩氏一并上路，巩氏悲忿填胸，诡计以他杀身故相抗。
岳夫人李氏闻之劝曰:"以吾夫之贤，可使无后乎?"巩氏于是行痛不哭④。
长女岳安娘，二十二岁，适高祚，居地待考。三子岳霖年十二岁，其时的往向有两种说法:一种说法讲，岳霖由岳飞故人故交贡文宪隐留家中，为保孤贡弃官秣陵关总镇，潜居丹阳紫阳渡(今丹阳培棠柳茹村)。
如《丹阳县志》卷二十四《流寓》载:"岳霖，忠武王少子，王与长子云为秦桧所谗谄，时邑人贡文宪为狱吏，潜挟霖逃回丹阳"。另一种说法讲:岳霖被放逐岭南。如王瑞来先生考述:"清岳监辑《金佗祠事录》卷一《祠源》引明朝姚滔《题请祠谥疏》云: "考其岭南诏还之时，霖年十二而流窜，三十四而生还。
"《钦州志》卷九《拾遗》载岳霖《过灵山述怀》所云有:"漂泊天南瘴海滨"诗句。岳霖临末遗嘱岳珂:"余初囚大祸。流落囚缧。。。。。。"那些似可证明岳霖曾被放逐过。此疑尚待进一步考证。
二女岳银瓶，年十一岁，通书史，知大义，闻父被难，口啮指血上书辩父冤，为奸臣所阻逐抱银瓶恸哭投井死，又因其死于父难后，后人誉为孝娥。
四子岳震七岁，五子岳霆四岁，居九江沙河家中， 岳飞父子遇害的凶讯传来， 家人闻变拥其潜过长江:改姓鄂 ⑤， 匿居于湖北黄梅大河之滨，后迁杨梅岭山区聂家大湾。
①《平反庙谥》载:张宪有四子，乾道元年(1165年)，张宪子张敌万讼冤，诏复张宪原看察使，四子各与补官。
景定二年(1261年)，张宪逃封烈文侯。②朝野遗记。⑧岳珂《鄂王行实纪年》，李心传 《建炎以来系年要录》。 ④李安《岳飞史迹考》。 ⑤黄梅《岳飞家史》、衡东《岳氏宗谱》。