六年后，宋太宗眼看时机已成敦，派潘美和杨业北上收复燕云十六州，结果在行军途中，潘美不听杨业劝阻，一意孤行，贸然出击，导致宋军溃败。而杨业率领杨家军去救潘美时陷入重围，因为无支援部队，战乱败被擒。

史载：“杨业力战，自日中至暮，手刃数百人。”杨业被辽军擒获后，宁肯不投降，并且留下千古名言：“'上遇我厚，期讨贼捍边以报，而反为奸臣所迫，致王师败绩，何面目求活耶！”结果他绝食三天而死。杨业死后，他的忠勇却被世人所钦佩，其传奇故事也开始在在民间流传开来。

因为杨业的大儿子杨延玉也死在这场战役中，因此，他的二儿子杨延昭接过杨业衣钵。杨延昭就是我们熟悉的“杨六郎”，杨延昭虽然是排行老二，但却称为六郎，原因是杨延昭同其父一样英勇，一样在保卫大宋的边疆中立下赫赫战功，闻风丧胆的辽人给他起的称呼。

当时辽人对神勇无比的杨延昭惊为天人，以为他是北斗星中的第六星的下凡，故而敬称六郎。对于杨延昭的表现，宋真宗赞赏地说了7个字：“治兵护塞有父风。”

然而，杨延昭也落得和父亲一样的结果，英年早逝，战死沙场。之后，杨家大旗传到他的儿子杨文广手里，结果杨文广还没有建立不世战功就去世了，令人唏嘘。值得一提的是，真实的北宋历史上，并没有女子从军的事情发生，更不可能出现女子挂帅的情况。

因此在评书和演义中，杨门女将在杨业的老婆佘赛花的带领下，组成了杨门女将，其中包括杨大嫂、杨六郎的媳妇穆桂英、杨业的千金杨八妹、杨九妹以及杨家的丫环杨排风都是巾帼大英雄，驰骋疆场，无往不胜。这些都是小说之言，杨家女将是不存在的。

而自杨文广之后，杨家就此消失在两宋的历史上，而南宋名将杨再兴，虽然也姓杨，但和杨业是没有血缘关系的。因此，当公元1126年，发生靖康之耻时，宋徽宗、宋钦宗被金将完颜宗望、完颜宗翰俘虏，北宋正式灭亡，不见了杨家将的身影也就不足为奇了。

当然，这并不意味杨业的后人就此消失了。据悉杨家将的后裔们后来四散开来，有去贵州的，有去四川的，有去湖南、广西的，也有去广东、福建的。后来更又迁徙到越南、泰国、菲律宾、新加坡、韩国、美国等十一个国家。而杨家《36路秘传杨家枪法》也流传民间，从抗敌利器成为强身法宝。

如今在四川、湖南、安徽等多个省份的小村庄都有人自称是杨家后人的。据悉，在四川梓潼，有一位叫做杨开华的老人，自称是杨家的37代传人，熟练掌握杨家36路枪法。

史学家闻之纷纷去四川采访年逾六旬的杨开华老人，杨开华除了介绍祖上光辉事迹，但他还有一个“担心”：杨家36路枪法后继无人。原因是他的儿子也就是杨家38代传人杨鹏对杨家36路枪法一点都不感兴趣。