后来，唐玄宗回朝。虽然他已经成为了太上皇，可是唐肃宗还是非常担心自己的父亲会重新夺权。李辅国最了解唐肃宗，唐肃宗不便出面，他就代替唐肃宗处处为难唐玄宗。他不仅赶走了高力士，还变相的圈禁了唐玄宗，最终因此更受唐肃宗的赏识。
而李辅国并不满足于当一个太监首领，他要的是更大的权利。于是他又勾结上了唐肃宗的皇后张氏。李辅国通过张氏在唐肃宗面前吹的枕头风，得以获得批准进入朝堂，而张氏也通过李辅国得以在前朝铺展自家的势力。两人狼狈为奸，把唐肃宗哄得团团转。
后来，李辅国当上了宰相，更是手眼通天，甚至连唐肃宗都已经不再放在眼里。官员们的奏折，必须要先呈给李辅国，李辅国审阅过之后，才能呈给唐肃宗。而唐肃宗下的圣旨，如果上面没有李辅国的批示，百官们也不敢遵从，生怕惹怒了李辅国。最初，唐肃宗因为李辅国的粉饰太平，并没有发觉异常。
而时间一长，他也发现李辅国对自己并不如从前恭敬，而且在朝堂之上，文武百官也开始以李辅国马首是瞻。可惜唐肃宗没等到动手的机会，自己就先病倒了。他病重之后，原本因为利益勾结在一起的张皇后和李辅国二人，也开始起了龃龉。
