杨师道死后，公主和赵斌、杨豫之两个儿子度日，公主活到51岁时去世，两个儿子哭的非常伤心，亲友们也纷纷前来悼念，其中，李世民的六妹，也就是杨豫之的姨母永嘉公主也来祭奠姐姐。可没想到，杨豫之和这个姨母早有私情，二人在夜间干了难以启齿之事，被永嘉公主的丈夫窦奉节发现，随后气愤地禀报了李世民。
李世民听闻后大怒，杨豫之犯了两条大罪，第一，母丧期间行如此丢人之事，不仁不孝。第二，外甥和姨母有私情，有辱家国尊严。所以李世民下令杀掉杨豫之，并且让他的姨夫窦奉节亲自去杀杨豫之。至此，公主的3个儿子，被李世民杀掉了2个，只剩一个赵斌。
关于长广公主（桂阳公主），她的人生是不幸的，因为父亲造反，丈夫战死。大儿子因为谋逆被李世民所杀，她死后，她的小儿子却因为不成才而死。李世民曾评价他的这位姐姐：两个姐夫都是好人，可惜两个儿子却十恶不赦。
