可惜朱允炆一开始就没听他的，辜负了他的忠诚--
建文元年四月，朱元璋忌日将到，朱棣把朱高炽、朱高煦、朱高燧三个儿子都派到京师，让他们去祭祀他们的爷爷。
朱高煦身材高大，为人凶悍，徐辉祖密奏建文帝："我这三个外甥，其他两个倒没什么，唯独高煦不是省油的灯，他勇猛剽悍，而且脑壳上有反骨，既不会忠于陛下，将来还会背叛他爹，日后定将成为大患。"
所以他建议把他留在京师，严加管束，不让他回北平，不然就是放虎归山，而且他建议，把他三个外甥全部留下。
徐辉祖之所以如此建议，是因为他十分了解这个姐夫，知道朱棣早晚要反，在此之前就多次劝建文帝早做准备。
