后来，在赵匡胤发兵进攻南唐时，在向南唐宣战之前提前派出探子从南唐搜罗了一张林仁肇的画像。在南唐使臣来到开封进行交涉之时，赵匡胤将画像取出，对使臣说道："这个人已经投靠了大宋。"就是这样一句没头没尾的话，在传回南唐后，竟让李煜大感忌惮。
不加任何思索，他立即派人杀害了林仁肇。
自此，南唐失去了最后的支柱，朝中已再无可用之人。
公元975年，宋军兵临城下，李煜赤裸着上身走出城门，南唐彻底退出历史舞台。李煜和他的美人们全部沦为阶下囚，因为，早年李煜多次拒绝归顺宋朝，所以，赵匡胤便"赐"给他一个颇具侮辱意味的爵位"违命侯"。
