海陵王不高兴的说：不要你说伐宋行不行，你就回答多久能灭掉南宋？当听到思忠"至少十年"的回答时，更是大怒，脸上露出一股杀气。
海陵王说："自古帝王混一天下，然后才称得上正统，你这个老头不懂其中的道理，还不如回家问问你那读书识字的儿子吧"
一心一统天下的海陵王念及思忠是老臣，没有杀他，但另一个提反对意见的祁宰就被其杀掉并抄家。
祁宰指出：当年太祖伐辽攻宋，手下人才济济，还不能统一中国，现在的文臣武将都不如当年，伐宋谈何容易。兴师动众势必劳民伤财，赋税繁重，最终导致民心离散。再加上南方河网密集，北人不善水战，地形上处于不利地位。
事实正如祁宰所言，海陵王为了攻宋，动员全国兵力，凡年龄20岁至50岁的男子都被强征入伍，并下令拆毁民众住房取木材造战船，大肆搜刮民间骡马，以至于国内人心浮动，怨声载道。
