广德元年（763年），仆固怀恩奉命护送自己的女婿和女儿（即是回纥的登里可汗和光亲可敦）回漠北，宦官、监军骆奉先误信辛云京的谣言，竟向朝廷诬告仆固怀恩与回纥勾结。仆固怀恩无法自明。对此，在笔者看来，在安史之乱后，为了防止安禄山这样的叛将再次出现，唐朝越来越倚重宦官，以此来制衡各地的武将。甚至到了唐朝后期，宦官更是执掌了唐朝的禁军，乃至于拥有了废立皇帝的大权。在古代历史上，虽然明朝的宦官给人们留下了深刻的印象。但是，实际上，唐朝后期的宦官，反而更加嚣张跋扈。在宦官的诬陷之下，仆固怀恩这位名将同样百口莫辩。
对此，唐代宗遣宰相裴遵庆慰问，仆固怀恩见到裴遵庆之后，抱着他的脚大哭，裴遵庆让他入朝，但将行之时，副将范志诚劝他说："大帅您已经被朝廷嫌忌，为什么还要去不测之地呢？难道没看见李光弼、来瑱的下场吗？这两个人功高不赏，李光弼被夺权，来瑱被杀，您不为自己着想吗？"听闻此言，仆固怀恩便不肯入朝，也即他不想成为第二个来瑱。在此基础上，仆固怀恩决定派一个儿子进京，又被范志诚劝止。
当然，仆固怀恩此举，也让朝廷没有台阶下了。这时，朝廷无法平息各方的争议，而仆固怀恩也派出儿子仆固玚与辛云京开战。唐代宗派颜真卿去召仆固怀恩，颜真卿说："仆固怀恩所部朔方将士，都是郭子仪的旧部。不如派郭子仪去收其部众，消弭兵乱。"颜真卿此策不愧是一招妙棋，不费一兵一卒就平息了兵乱，可惜他没有进一步为仆固怀恩谋划一下，导致仆固怀恩走投无路，从而起兵造反。
