开宝三年，赵匡胤派潘美远征位于今天广东、广西地区的南汉国。潘美一路势如破竹，甚至轻松击败了南汉闻名于世的象军部队。最后，广州城破，南汉国君刘鋹兵败被俘。潘美先灭一国。
开宝七年，赵匡胤派曹彬率军征伐南唐。而宋军的箭头人物，仍然是潘美。他连挫南唐军队，一路直抵南唐都城金陵城下。南唐摆出水、陆十万大军迎击，却被潘美打得大败亏输，后主李煜无奈只能率众出降。潘美再灭一国。
太平兴国四年，宋太宗命令诸将征伐北汉，潘美又是作为宋军的尖刀人物出战，一举平定了北汉，潘美灭了第三国。至此，五代十国几十年的混乱局面，终于在宋朝两任皇帝以及潘美这样的宿将手中终结。
然而，不幸的是，辉煌过后，往往迎来的是黯淡。一带将星潘美，在经过下面这一场失利以后，不仅身上的光环尽失，而且还被民间丑化为了大奸臣，他的名字，也被野史小说改成为了“潘仁美”！名字中间被人加了一个“仁”字，反倒成了“不仁”之人！
雍熙三年，宋太宗诏令曹彬、潘美等诸将北伐。潘美自领一路军马，先后攻克了幽云十六州中的寰州、朔州、云州、应州四州。可这时，曹彬所率领的主力部队却出师不利，原来的计划被打断，其他各路只得原路撤退。
正当潘美率领着四州百姓准备南下时，辽国的追兵已经很近了。潘美的副将，也就是杨家将的掌门人杨业，这时站了出来，他认为此时辽军士气正盛，不宜与之交战，应该积极避战，带领百姓安全后撤即可。
可这时，身为监军的宦官王侁，却以不能消极避战为由，拒绝了杨业的意见。在宋太宗朝，监军的权力甚大，即便是潘美也奈何不得。
最后，王侁逼迫杨业率军迎战辽军主力，而他自己又不按既定计划，为杨业掩护策应，最终导致杨业全军覆没，而杨业本人被俘后绝食而死。
杨业的死，潘美有一定责任，但不是主要责任。可惜的是，世人没有记住宦官王侁，反而将这笔账算在了潘美的头上。在评书小说中，潘美就成为了通敌卖国、残害杨家将的大奸臣潘仁美，对于历史，这实在是可惜可叹，对于潘美本人，这实在是太不公平。
