江斅不但没有答应宋明帝的赐婚，还写了一篇名为《辞婚表》的信，送还给了皇帝。江斅在信中写道，从古至今，凡是当过驸马的，都不能承受公主们的娇蛮，历朝历代的公主们，也都是傲娇任性，在宫中作威作福惯了，嫁过来难免闹得家里鸡犬不宁。因此他便有了退婚的想法。
这在当时，引起了极大的轰动，这样的做法可以说是直接对皇家进行侮辱了。可宋明帝不但没有惩罚江斅，反而将这封信传阅个各个公主。这件事传到了临汝公主的耳朵里后，临汝公主也是大发雷霆，可她还算是个聪明人，短暂地生气之后就反应过来，开始思考自身的问题，也慢慢改掉了自己的臭脾气。
于是，过了没多久，在宋明帝的又一次推动下，改掉脾气的临汝公主还是嫁给了江斅。其实，在《宋书》的记载中，是宋明帝找人写下了这篇《辞婚表》，然后交由驸马江斅之手，说是江斅不满公主的性格脾气，才想退婚。其实确实宋明帝想要通过这样的方式，来教育这些娇蛮的公主们，可谓是用心良苦，在历史上也确实是只此一家！
