没多长时间宇文赟驾崩，杨坚篡位改国号为隋，杨坚称帝之后就想让杨丽华改嫁，但是遭到了杨丽华的一再拒绝，随后杨丽华和杨坚就相继离世了，杨丽华的女儿也遭到了隋炀帝杨光的迫害，公元前615杨广因听信"李氏当为天子"的谣言，将包括宇文娥英的丈夫李敏在内的李姓官员的至亲处死，三族之内的亲属，都流放到边远地区。几个月之后，宇文娥英也被自己的亲舅舅隋炀帝赐毒药毒死。杨丽华一脉惨被灭族。
杨阿五是独孤皇后最小的女儿，成年之后杨坚就为他选了一门亲事，杨坚称帝之后，杨阿五被封为兰陵公主，但是丈夫在不久之后就因病去世了，没多长时间，她的公公为了讨好皇上就去奏请让兰陵公主改嫁，但是却遭到了皇上和群臣的反对，并且还将他刺死了，兰陵公主在夫家肯定是混不下去了。最终杨坚为她选了一个新女婿河东柳氏的柳述，但是没多久他就被自己的坑死了。
