作为正妻，武士彟去世后杨氏有继续照料家庭的义务。然而，这却引起了武士彟与前妻的两个儿子，武元庆与武元爽的敌视。武氏兄弟已经成年，杨氏这个后母应该虐待不了两个继子，而且杨氏无子，也不存在争家产的问题。所以，大概是武氏兄弟不尽孝道，引起的家庭矛盾。
武氏兄弟不但不能对继母以礼相待，而且还苛待三个妹妹。《新唐书·武后传》说他们"遇杨氏及后（武则天）礼薄，后衔不置。"武则天因年龄小，无力反抗，只能长期衔恨。
长期在这种敢怒不敢言的压抑氛围中，幼小的武则天心理上受到了很大的打击，直接导致以后武氏兄弟死的都很难看，也使武则天有了极深的城府与极强的斗争性。
