贞观六年，监察御史马周上书表示，大安宫是太上皇至尊所居之地，却规模卑小，要是被各国往来的使者看到了影响不好，希望能够修缮大安宫，以彰显皇帝孝道。李世民不搭理他，将奏折搁置。史书记载，李渊是一个非常喜欢出门游猎的男人。在玄武门之变以前，即使公务繁忙，战争不断，李渊每年也要出去打猎，但玄武门之变以后，李渊再也没有出过门！
夏天的大安宫十分炎热，李世民曾多次前往九成宫避暑，却没有带李渊同行。监察御史马周又看不下去了："今所幸宫去京三百余里……非可以旦暮至也。太上皇情或思感，而欲即见陛下者，将何以赴之？且车驾今行，本为避暑，然则太上皇尚留热所，而陛下自逐凉处，温清之道，臣窃未安！"你自己跑到清凉的地方避暑去了，却把太上皇留在酷热难耐的地方，这是孝道吗？李世民依然置之不理，就是不带李渊。
但是到了贞观八年夏天，李世民却一反常态，"屡请上皇避暑九成宫"。良心发现？当然不是，此时的李渊已经中风发病，无法下床，想去也经不起车马劳顿的折腾了。同年，李世民以"为太上皇兴建清暑之所"为由，修建大明宫。李渊都已经快病死了，你倒想起来修建清暑之所了，早干嘛去了？说到底是给自己修的！
后来大明宫还没盖好，李渊就驾鹤西去了，李世民自然搬进了更为豪华的大明宫。李渊早年在李建成与李世民之争中，逐渐倾向太子，打压秦王，所以李世民是对李渊是有很大意见的。在李世民一系列操作下，李渊不得不退居二线，但是李世民一直耿耿于怀，所以他甚至都不去看李渊，只是好吃好喝供着，美女妃子供着，让李渊"享福"。
