当时杨氏已经五十七岁，无意改嫁，决定与时年十一岁的武则天姐妹们继续在武家生活。作为武士彟的续弦，杨氏的身份是正妻，理应操持武家家事，主持门户。武士彟的儿子武元庆、武元爽依礼也该尊重继母杨氏。因为孝是中华民族的优良美德，有子曰："孝悌者也，其为人之本与。"当时的宰相房玄龄对继母的孝顺就闻名于世。
然而，武氏兄弟对杨氏却十分不友好。据《旧唐书·武承嗣传》记载："士彟卒后，兄子惟良、怀运及元爽等，遇杨氏失礼。"也就是说，武士彟的儿子武元庆、武元爽，侄子武惟良、武怀运对杨氏都未能尽孝，而发生了冲突与矛盾。
按说杨氏与武士彟并没有儿子，不存在与长子武元庆争夺爵位继承权的问题，也不存在与武氏兄弟争夺家产的问题。再者，从武德五年左右杨氏嫁给武士彟，武氏兄弟已与杨氏共同生活了十二年左右，人都是有感情的，而他们却对杨氏失礼。所以，多半是武氏兄弟的过错。
而且，武氏兄弟对幼小的妹妹也很无礼，据《新唐书·武后传》记载："遇杨及后（武则天）礼薄，后衔不置。"衔不置的意思是：放在心里，默不作声。因为，当时武则天只有十一岁，面对哥哥的薄待，只能默默的记在心里，隐忍不发。这样的生活对幼小的武则天有很大的负面影响。
