唐代宗登基之后，李辅国经常在唐代宗面前说元载的好话，因此不久之后，元载圆就成为了唐朝的宰相。元载能够当上宰相，几乎全是李辅国的功劳，但是元载却恩将仇报，又帮着唐代宗杀死了李辅国，因此更加得到唐代中的信任。
成为宰相之后，元载日益骄纵，并且大肆敛财，贪污受贿。唐代中看看在君臣一场的份儿上，经常对元载加以劝诫，希望他好自为之，能收敛一点。但是元载却丝毫不放在心上。最终唐代宗终于忍无可忍，将元载投入狱中，并且将其抄家。
本来唐代宗想要放过元载的家人的。但是抄家的时候，人们在元载的府中翻出了800石的胡椒粉，还有500两钟乳。当时中国并没有胡椒粉，都是从印度进口的，因此非常昂贵。800石相当于现在的64吨，就算是元载一家吃一辈子也是吃不完的。
唐代宗知道这件事情之后，大怒，马上令人将他的家人满门抄斩，甚至还将元载的父亲祖父挖出来鞭尸，暴尸荒野。
