在《三国演义》中，蜀军中有两位五虎上将都败在潘璋手下，以至于丢掉了性命。不过，罗贯中在执笔时，显然是倾向于刘备集团的，因而也将潘璋之死描绘成了“恶有恶报”，安排关兴斩杀了潘璋。
比起曹魏的五子良将和西蜀阵营的五虎上将，潘璋这个名字似乎显得黯淡无光，很容易被人忽视。不过，这位东吴大将，却是擒拿关羽和暗算黄忠的关键人物，可以说，蜀军五虎上将中的关羽和黄忠，皆是因潘璋而死。
潘璋在襄樊战争中，关羽几乎调动了一切力量与曹军交战。然而，由于双方实力悬殊，加之孙权背后偷袭，尽管关羽最初获得了辉煌的战果，终究还是落得惨败，在麦城被东吴擒获。
在追击关羽的将领中，潘璋及其部将马忠起了主要作用。当时，关羽、关平及赵累率领残兵从麦城败退，而潘璋等人则在城北设伏。
关羽起初，潘璋试图与关羽交战，但仅三回合便自知不敌，吓得拨马而逃。不过，关羽不敢恋战，继续领兵前行。可是，潘璋早有准备，他命部下马忠率人埋伏在路边，用长勾套索绊倒了关羽坐骑，而后捉拿了关羽。关羽被俘后，誓死不降，惨遭杀害。
刘备得知丢了荆州，关羽又被杀，因而兴兵讨伐孙权，发动了夷陵之战。然而，在此战中，五虎上将中的黄忠也遭潘璋等人算计，在中箭后不久重伤身亡。
当时，黄忠不甘在中军被刘备“雪藏”，争着率军与潘璋交战。黄忠虽老，却有着十分丰富的战斗经验，而潘璋自知不敌，又使用了奸计。他在与黄忠交战时诈败，引黄忠追击，让马忠在险要处暗放冷箭。最终，英雄一世的黄忠也在潘璋和马忠的暗算下殒命。
黄忠然而，尽管潘璋等人设计俘获了关羽，又射杀了黄忠，但却最终被关兴给杀了。罗贯中在撰写这段情节时，对关公的推崇十分明显：当时，关兴与潘璋相遇，见其手中拿着关羽的青龙偃月刀，因而拼命与之厮杀，誓要为父报仇。结果，潘璋不抵关兴，一溜烟地逃到了山村中，躲了起来。关兴一路寻找，最终在农户家找到潘璋，并将其手刃。
关兴事实上，如果仅凭武艺，《三国演义》中的潘璋与关羽差了一大截，仅仅交战三个回合便落荒而逃。同样，在与黄忠交战时，潘璋也并无胜算，因而用计暗算了这位老将。从一点来说，并非关羽和黄忠杀不了潘璋，而是潘璋太过奸诈所致。
