在與遼國的幾次交鋒中，宋朝的楊業和潘美配合默契，屢戰屢勝，把遼國打得落花流水，落荒而逃。宋太宗越來越重視楊業，這為他的後代楊六郎等人的成名鋪平了道路。
公元1074年楊家第三任主人楊死後，居住在楊府的子孫陸續遷出。此後，除了回家祭祖，楊家後人再沒有搬回來過。浪漫平淡的時候，更可信。事實上，楊家將在歷史上被誇大了——當然，他們無愧於為國盡忠、勇往直前的典範，所以當宋朝被敵人滅亡的時候，他們更被遺民銘記。
的第二代傳人就是我們所知道的，也就是楊。他的名氣似乎最大，但在他活躍的這段時間裏，歷史上並不存在叫穆的女人，穆全是戲劇家和小說家。其次，由於兩位皇帝和朝廷選擇了媾和而不是爭鬥，所以即使小說中真的存在佘太君和女將軍，她們也不可能上戰場保家衛國，保衛大同軍。楊業的父親楊信，曾是後漢林州(今陜西神木)刺史。五代大亂時，他占領林州，自稱刺史。由於時局動蕩，他加入後漢和後周。
楊之後，楊家又得不到朝廷的啟用，所以北宋滅亡的時候，也就沒有了。如果楊有孫子的話，他的年齡應該和哲宗皇帝差不多。惠宗統治時期的宋江、方瓦其起義、金國入侵都沒有記載楊甲子孫子的事跡。從楊去世到北宋滅亡，他的後代最多也就四代，功名利祿可能不太明顯，沒有太多記載。也就是說，當時是留在福建的，但他很快就不姓楊了。到了北宋末年，這支軍隊換了很多主帥。因為長期留在南方，後來並入南宋。