楊家將故事開始就是楊業歸宋，楊業原名楊重貴，18歲入太原做人質，被北漢國主收為義子，改名劉繼業，繼是北漢皇族的排行，北漢滅亡歸宋，回覆本姓楊，去掉北漢皇族排行繼字，叫楊業也有的記載非叫楊繼業，不去掉繼字。楊業之死最大的責任人是宋太宗趙光義，其次是監軍王侁，最後是主帥潘美，潘美最大的問題就是害怕得罪監軍王侁，進而得罪宋太宗趙光義，畢竟他屬於武將，而宋代皇帝對武將極端的不信任，所以他為了個人的前途也不得不屈從王侁的建議，所以在這件事上他犯下如此大的錯誤，導致楊業被殺，也成為最大的背鍋俠。

高梁河之戰，宋軍中路主帥田重進，西路主帥潘美，東路軍主帥曹彬，作為主帥，潘與曹、楊業約好分三路進兵攻遼，楊作先鋒，但潘不但沒有如期到達指定目的地，延誤戰期，而且當楊向潘求援時，潘手握重兵，不撥一兵一卒去接應。王侁讓楊業去誘敵的，結果楊業和遼軍接戰後被敵方圍攻，楊業一下脫不了身，沒有按時在陳家谷和潘美會師，因為原定中午會師，結果楊業帶去幾千人只剩幾百人傍晚才到，因為楊業面對的是十萬遼兵，潘美以為楊業殉國了，所以大軍在傍晚前撤走了，王侁是監軍，是他逼楊業去誘敵的。

潘美，作為北宋第一名將被後世的評書、影視作品不斷的詆譭、歪曲，實在不公平。要說陳家谷口楊業兵敗被殺，那首先也是監軍王侁明知是送死的情況下，仍然逼迫楊業孤軍深入，然後又見死不救。要說潘美作為西路軍主帥應該負直接責任，但是看看宋朝的軍政制度，監軍可是比主帥的權利還大，潘美其實也受制於人，所以楊業的死直接責任人是王侁。

潘美根本沒必要嫉妒楊業，楊業在宋軍中地位與潘美相差過分巨大，猶如梅西沒必要嫉妒武磊。宋朝歷代只有四位名將被位列皇室宗廟供奉，首席名將就是潘美。楊家將傳說畢竟是小說演繹，楊業和潘美差距不是一兩個檔次的問題，北宋這麼多名將位列宗廟的只有潘美曹彬曹瑋李繼隆四大名將，楊業狄青這些雖然名氣很大，但和上列四將有檔次上的差距。

潘美是柴榮的愛將地位比肩趙匡胤，楊業只是北漢降將，兩人根本沒有矛盾，不僅沒有而且是潘美多次救援楊業，在如何對待柴宗訓的問題上沒有敢說話，是潘美第一個站出來收養了柴榮的另一個兒子，可見潘美的人品。後世潘美奸臣的形象都是趙匡義和趙普這兩個惡人潑髒水，實在是冤枉潘美。

潘美根本沒有動機去陷害楊業，第一，北宋參軍是個很特殊的職業，代表皇帝，曾經發生過參軍逼死主帥的事情，潘美說到底還是太祖的人，儘管是太宗兒女親家，但趙光義的心胸和手段，潘美恐怕有不得不顧及幾分。第二，邊將對楊業不滿，在暗地裡向趙光義告狀，結果趙光義把這些奏章封在一個箱子裡，原封不動的給了楊業，如果是潘美陷害，楊業怎麼可能不知道是潘美的所作所為。第三，參軍王侁得知前方楊業打了敗仗，立刻逃跑，宋史記載潘美不能“制”。潘美的地位在宋朝很高，開國元勳，楊業再怎樣也是降將，如果說和他平級或稍高一些的人妒極有可能，但潘美這個級別，根本不可能，而且潘美人心還算仁厚，收養柴世宗侄子的事情，比趙普強多了。