独孤伽罗也怀疑是儿子和小三毒死了正牌儿媳妇，对杨勇很失望。《隋书》记载，独孤伽罗曾经哭着说："我低声下气，为杨勇找来元氏女为妻。杨勇不知好歹，专门听狐狸精云氏的话，竟然不想和元氏做夫妻。杨勇狼心狗肺，对待元氏猪狗不如。元氏本来没病，突然就暴毙了，肯定是杨勇和云氏派人毒死的。（我为伊索得元家女，望隆基业，竟不闻作夫妻，专宠阿云，使有如许豚犬。前新妇本无病痛，忽尔暴亡，遣人投药，致此夭逝。）"
隋文帝也怀疑是杨勇和云昭训毒死了太子妃元氏，就去找杨勇对质。杨勇面对父皇和母后的质疑，他非但不做解释，反而怼父皇说："是不是元孝矩那个老东西，到处造谣说我毒死他的女儿。将来有了机会，我一定杀了那个老东西！（会杀元孝矩！）"
图为杨勇影视形象
杨勇的回答，让独孤伽罗和隋文帝倒抽一口凉气。元孝矩死了女儿，有所怀疑也正常。杨勇身为元孝矩的女婿，非但不安慰伤心欲绝的老丈人，反而威胁要杀了老丈人。人之无情，乃至于是。这就让独孤伽罗越来越担心了，独孤伽罗对隋文帝说："我们老两口还在，杨勇都这么嚣张。如果我们不在了，他能容得下我们的另外四个儿子吗？"
