贞观九年(635)五月，唐高祖李渊驾崩。
武士彟得知消息，十分悲痛，''因以成疾''。唐太宗屡遣名医诊治，但武士彟仍因医治无效而死去，终年59岁。
武士彟的逝世让杨牡丹在家里的地位一落千丈，她只有三个女儿，没有儿子，女儿还年幼，武家待她们母女不好。
杨牡丹的三个女儿，长女武顺嫁贺兰越石，次女武则天送入宫中，三女武氏下嫁郭孝慎。
武则天的两个同父异母哥哥----武元庆、武元爽，当时早已长大成人，对杨牡丹这个后妈非常不恭敬。武家的人自然帮着武元庆、武元爽，不把杨牡丹这个老寡妇看在眼里。尤其是武士彟的侄子武怀亮的妻子善氏，更是待杨牡丹无礼。
