大臣肯定是专心钓鱼，作为皇帝的宋仁宗，便趁此机会观察大臣。只见其他大臣都气定神闲等待着鱼儿上钩，唯有王安石坐立不安，还偷偷吃着东西。宋仁宗一看，王安石竟然在吃身边放置的鱼饵，而且很快就将一碟鱼饵吃光。这样的事情被宋仁宗发现后，宋仁宗心里对王安石就有了想法。
史书记载为"仁宗朝，王安石为知制诰。一日，赏花钓鱼宴，内侍各以金揲盛钓饵药置几上，安石食之尽。"次日，宋仁宗与宰相谈论此事，对王安石的看法更为严重。宰相们谈起此事，很不客气地说："王安石是一个奸诈之徒。如果是常人，偶尔误食一粒倒情有可原，发现后便会停止食用。可王安石在知道是鱼饵的情况下，却还要全部吃光，这实在有悖于人情啊。"
史书记载为"明日，帝谓宰辅曰："王安石诈人也。使误食钓饵，一粒则止矣；食之尽，不情也。"帝不乐之。"为何这样一件小事，宋仁宗就认为王安石是一个奸诈小人呢？第一，仁宗觉得王安石心浮气躁，静不下来，是一个喜欢折腾的人；第二，王安石最初很可能是误食，但是在知道是鱼饵后，还依然将鱼饵吃完，知错不改。
还有就是王安石为什么要这么做？难道是的口味比较独特，与鱼类相同？显然不至于如此怪异，那么他这么做，是想哗众取宠博取关注，还是表达对皇帝和其他大臣的不屑？这时候的宋仁宗已经步入晚年时期，思想相对保守，因此"帝不乐之"，断言说："王安石诈人也。"此事之后，宋仁宗对王安石产生偏见，认为他不可重用。
