李世民在公元641年的时候，亲自为疼爱的女儿高阳公主挑驸马，所挑中的人正是当朝宰相房玄龄的二儿子，名为房遗爱。可高阳公主在当时并未看中他，但父皇的圣旨已经下达，所以高阳公主也不能做过多的反抗。并且李世民在当时之所以这么做，就是为了能够加强中央集权，能够巩固自己手中所握有的权利。就在公元648年，房玄龄去世之后，所面临的就是家产纠纷。而高阳公主在这个时候让房遗爱去和长子竞争。在公主的驱使之下，长子房遗直也只能去找李世民，经过一番调查之后，才发现这一切都是高阳公主所为，而李世民也把高阳公主责备了一番。
