620年七月，李世民奉命攻打洛阳王世充，持续近一年时间的洛阳虎牢之战就此拉开帷幕，而王世充在不敌李世民的情况下，向窦建德求援，结果李世民一举拿下了窦建德和王世充，立下不世战功。
王世充出城投降之后，李世民进入洛阳城。作为隋朝的东都，洛阳城中尽是世家大族，李世民自然对他们礼遇有加，出于政治目的，李世民将洛阳城中的很多女子包括宫中女子、世家大族的一些寡妇和少女，实际上多半为籍没的罪人，带回了长安。
到达长安之后，这些女子大部分都被分配到了李渊和李建成的宫中，还有一些进入秦王府，准确来说应该是天策府。李世民班师回朝之后，因为其不世战功被封为天策上将，李渊专门赐了一座弘义宫为天策府。
进入天策府的女子，比较著名的有韦珪、韦尼子和隋炀帝女杨氏等，韦贵妃即后来著名的韦贵妃，出自京兆韦氏，她原本是有丈夫的，即李子雄的儿子李珉，两人还生了一个女儿，即后来的定襄县主，结果后来李子雄跟着杨玄感一起搞事情，事败之后，韦珪就成了一个罪妇，没入宫中为奴。
再后来天下大乱，隋炀帝也到了江都，李渊进入长安称了帝，韦珪在这个时候可能就回到了娘家，然后被李世民带回了天策府，同时被带回去的还有韦珪的堂姐妹韦尼子。
韦珪后来成为韦贵妃，为李世民生下一子一女，韦尼子则成为韦昭容，并未生育。除此之外，还有隋炀帝之女杨氏。杨氏也是在同一年成为李世民的妾室，再后来成为妃子，为李世民生下了两个儿子，其中之一就是著名的李世民第三子李恪。
韦珪、韦尼子和隋炀帝女是同一时间进入天策府成为李世民的人的，其实与他们同时进入天策府的还有一个人，即刀妙琏。刀妙琏这个人身份比较特殊，但并不见于任何史籍，因为她去世的比较早。
