杨国忠发迹前有一个妻子名叫裴柔，原本是一个妓女，见其颇有几分姿色，就把她娶回家当老婆。当时的大唐风气相当开放，娶个妓女回家就是家常便饭的事。有一次，唐玄宗任命杨国忠前去江浙地区视察，由于古代交通太不方便，杨国忠这一去就是大半年。在丈夫外出的这段时间里，裴柔可能由于之前落下的职业病，渐渐耐不住寂寞，就找了别的男人消消火，哪曾想一发命中，竟然怀孕了。
这个裴氏果然不是一般人，她丝毫没有隐瞒的意思。等丈夫回到家中，直接告诉了他自己怀孕的消息，杨国忠一听脸都绿了，正要发作，裴氏补充道，自从你走后，我对你日夜思念，那天晚上我梦见你，于是就做了夫妻之后，醒来后就怀孕了。听罢妻子的解释，杨国忠发绿的脸渐渐红润起来，感动得不行，说这都是因为咱们夫妻情感深厚啊，"盖夫妻相念，情感所至。"
在担任宰相的期间，杨国忠专权误国，败坏朝纲，和之后安史之乱的爆发有脱不开的关系。所以对于杨国忠，人们是比较痛恨的。而在《开元天宝遗事》中就记载了一件事，令杨国忠被老百姓嘲笑了很久。有一次，杨国忠去外地出差，离开了一年多。当杨国忠回家的时候，却发现妻子裴氏怀孕了。杨国忠忙问妻子这是怎么回事，岂料裴氏一脸娇羞的躺在他的怀里，说自己是"梦中怀孕"。
