到永乐8年的时候，朱棣重新召回解缙回京，巧的是这时候朱棣在外带兵打仗，御驾亲征，解缙到京城和看到皇帝还没有回来，于是就拜见了一下太子朱高炽，然后就走了。朱棣回来了听说了这事情，于是就恼怒了，他任务解缙和太子一定有什么阴谋，就把解缙抓了起来，直接送进了诏狱（锦衣卫管理的监狱，直接听从皇帝命令，进入这地方的，基本上没有活着出来的），看起来好像是莫须有的罪名。就这样解缙在牢里一呆就是5年。
永乐13年，也就是公元1415年的正月，正是过年的时候，京城到处都是张灯结彩的，因为消防措施不给力，午门就着火了，发生了火灾，烧死了很多人，在现在看来，就是一起安全生产事故而已，但是在古代，那事情可就大了，这预示着上天在发怒了，所以才降火灾惩罚皇帝的，朱棣赶紧下令大赦天下，以弥补自己的过错。并不是所有的人都会赦免，所以朱棣需要查阅一些重犯名单，看哪个应该放，哪个不能放。锦衣卫指挥使纪纲就拿了一些犯人名单给朱棣看（令人费解的是这份名单中解缙是很靠前的，不知道是纪纲想让解缙死呢还是想先放了他）这一看就坏事了，朱棣看了解缙的名字，就说了一句值得玩味的话："缙犹在哉？"当你听到这句话的时候，可能心里会有2个想法，第一个就是"解缙怎么还活着啊，意思是怎么不早点把他弄死"第二个意思就是"解缙这么有才的人，怎么还在这里，赶快放了"如果你是一个了解?朱棣的人，那你就会明白他的意思了，那就是尽快把解缙解决了。纪纲就属于了解朱棣的那个奴才。
