李渊退位后，还住太极宫。太极宫位于皇城深处，戒备森严，与世隔绝，安静幽谧，正是养老的最佳场所，后来李隆基当了太上皇，便被唐肃宗李亨安置在此处，最终死在这里。贞观三年，在群臣劝说下，李世民将李渊迁居到太安宫。
太安宫初名弘义宫，是武德五年（622）李渊给李世民盖的。李世民最早也住太极宫，跟李建成李元吉离得不远，李建成住在东宫，李世民住在承乾殿（李世民长子李承乾之名即由此殿而来），李元吉住在武德殿。父子三人同掌朝权，同时发布命令，各部门先接到谁的命令，就照谁的命令办事。
为了改变这种政出多门的弊端，再加上李世民跟李渊建成元吉三人关系逐渐恶化，李渊便听了裴寂建议，在城外给李世民专门建造了弘义宫，理由是“以秦王有克定之功，特加殊礼”，让李世民搬出皇宫，远离了权力中枢。由于建造仓促，所以宫墙低矮，宫殿卑小，李世民颇有微词。李渊把太子之位传给李世民后，主动提出搬离太极宫，去弘义宫住，理由是弘义宫“有山林胜景”，环境优雅，我很喜欢。
但是李世民不许。一来大局不稳，自己刚刚登基，得把李渊牢牢抓在手里，不能离开他的视线。二来一登基就把老爸赶出太极宫搬到弘义宫，就如现在的年轻人一结婚就把老爸老妈赶到老破小的百年老房住，自己和新媳妇住宽敞明亮的大新房，娶了媳妇忘了娘，这叫不孝，让天下人怎么说啊。所以李世民一直不同意李渊搬出去，直到三年之后，大局已定，在李渊多次请求下，李世民才把李渊搬到弘义宫，改名太安宫。
太安即泰安，国泰民安。
三年之后，也就是贞观六年，监察御史马周跟李世民说，我前几天出了一趟城，到太安宫附近溜达，发现宫墙低矮，宫殿卑小，连个城楼都没有。你儿子李承乾住的东宫，比你老子住的牛逼多了。虽然你老爸不计较，你也爱惜民力，可是四方蛮夷和天下百姓都看着呢，老这么下去，总是不妥吧。李世民心说当年我就在这个地方住了五六年，你怎么不跟李渊提意见？当然这也不怪马周，当年马周还在村里教书呢，不认识李渊和李世民。李世民于是重修了太安宫，尤其把门楼修的又高又大，城墙修的宏伟壮观，显示自己是个孝子。
李渊搬到太安宫，李世民经常过来看望，父子二人喝酒聊天，有了好吃的也给李渊拿过来尝鲜。李世民公务缠身，忙的过不来，就每天派个太监过来，问候李渊起居，看看穿的用的有啥缺的，第一时间补上。
