宋太祖赵匡胤是取代后周才建立的宋朝，当陈桥兵变发生以后，他在“无奈”之下被将士们推上了皇位。回到京城以后，赵匡胤做的第一件事就是进入皇宫，毕竟那个地方现在已经是他的地盘了。
入宫后，赵匡胤派人将后宫嫔妃们聚集起来，宣布自己已经接受了柴宗训的禅位的事。就在这个时候，他看到了嫔妃手中抱着一个小孩子。宫里的孩子，除了是皇帝的种，还能是别的臣子的孩子不成？赵匡胤就问那位抱着孩子的嫔妃，问她这个孩子是谁。嫔妃就说这个孩子是周世宗的儿子，是后周皇室血脉。
俗话说斩草要除根，当时赵匡胤的几个心腹，比如谋士赵普，大将潘美都在场，许多人都劝赵匡胤要杀掉这个孩子，其中号称用半本《论语》治天下的赵普就同意杀掉孩子，永绝后患，只有潘美和另外一个人不说话。赵匡胤就问潘美，应该如何处置这个孩子？潘美还是不说话。
最后，赵匡胤沉思许久，还是放过了这个孩子，没有杀掉他。赵匡胤见潘美似乎也和他一样不忍心，就把这个孩子交给了潘美抚养。潘美吓得跪在地上：“臣和陛下都曾是周世宗的臣子，如果臣劝陛下杀了这个孩子，那就是辜负了周世宗对臣的恩情；如果臣劝陛下别杀这孩子，又是对陛下的不忠，陛下定会对臣生疑。”
赵匡胤笑着安慰潘美，说：“你放心，我知道你的忠心。现在我的皇位，都是从柴氏子孙手里得来的，如果杀了周世宗的孩子，我自己还不忍心呢，更何况是你？”
接着，赵匡胤又说：“现在我把这个孩子交给你来抚养，也是出于信任。只有你养这个孩子我才放心啊。不过，周世宗的儿子不可以把你叫爹，那这个孩子就当你的侄子吧！”
潘美接受这个使命，带着孩子回到家中，也不告诉家人这是谁家的孩子，只告诉他们要好好把他抚养成人。
潘美给孩子取名为潘惟吉，潘惟吉长大以后，还当了官，做到了刺史。
这个故事的另一个版本说的是，当时赵匡胤看到的一共是两个孩子，他二话不说便命左右将这两个孩子带走，暗中处理掉。谁知潘美的表现却异常反常，引起了赵匡胤的注意。赵匡胤知道潘美有些不忍心，就问潘美的看法。潘美说自己不敢反对，但是心里始终不安心。最后，赵匡胤派人把两个孩子追回来，将其中一个交给了潘美，自那以后从不过问孩子的事。
其实，从赵匡胤逼着小皇帝柴宗训禅位却没杀了柴宗训来看，就可以看出赵匡胤的仁慈。再加上周世宗生前待他非常好，他又怎么能恩将仇报呢？