高力士曾对唐明皇建议：不得给予宰相太多的权柄。因为，他担心这样一来会影响唐明皇的皇权以及势力。
所以，他曾进言道"对宰相李林甫不宜信用太专，天下皇权、权柄不可假手于人，这样是对您自己权威的挑战。"唐明皇听了有些不高兴，高力士见势立马下跪认错，说："是自己胡言乱语顶撞了皇帝。"没想到，唐明皇立马设宴款待他，并说："知道高力士的心都是为朕去着想的，所以，不会责怪你。"宫中众人因此歌颂唐明皇英明，知道体恤下情。
可以说，高力士在唐明皇心中有着不可撼动的地位，甚至，立哪个皇子为太子这么重要的事情，都以高力士的意见为参考。
开元二十五年间，李隆基废黜二皇子李瑛后，前朝后宫势力盘根纠缠，大家想推选十八子李瑁为太子。唐明皇咨询高力士的意见，高力士答："立长子为太子是有古训先例的，谁也说不出什么。"遂三子李亨为太子，也就是后来的唐肃宗。这看似一切正常，可是，大家恐怕不知道李亨可是在背后尊称高力士为"兄长"的。
