唐高宗登基时，许敬宗身为弘文馆学士，负责编修国史，"废王立武"事件开始时，许敬宗以其敏锐的政治嗅觉预感到了长孙无忌等人必将失势，他迅速投靠了武则天。
当唐高宗和长孙无忌、褚遂良为了"废王立武"闹得不可开交时，许敬宗公开说了一句戏言：庄稼汉也想换老婆，何况天子呢？《资治通鉴》云：
许敬宗宣言于朝曰："田舍翁多收十斛麦，尚欲易妇；况天子欲立后，何豫诸人事而妄生异议乎！"
意思是说，有一个农民，今年大丰收，多收了十斛小麦，觉得自己富有了，于是休掉了原配妻子，打算重新换一个老婆。庄稼汉多收了十斛麦子都想着换老婆，这种事情别人是无权干涉的，因为这是人家的家事。若是当今皇帝想换皇后，其他人也没有必要妄生异议！"
