天宝年间，高力士再度加封为冠军大将军、渤海郡公，靠着多年收受贿赂积攒下来的钱财，高力士远比一般的王爷有钱，在自己居住的地方造了一座佛寺，里面供奉的珍贵宝物与国力相当，佛寺建成的时候，高力士大摆筵席，朝中人人赴宴，叫嚣凡是来敲钟的人，每敲动一下就会得到一千钱赏赐，来人络绎不绝。
公元755年，朝廷设置内侍省，任命力士、思艺同时担任内侍监，后来安史之乱爆发，李隆基逃往成都，此时仅有高力士陪在身边，袁思艺早就投靠了安禄山，为嘉奖高力士，唐玄宗封其为齐国公，就在同一年，太子登基，李隆基被尊为太上皇。
公元760年，李隆基移居甘露殿，高力士因为侍奉李隆基被李辅国陷害，流放至陕西地区，两年之后特赦回京，回京之后与人交谈才得知唐玄宗早已驾崩，高力士痛哭不止，最后悲伤过度吐血而亡，人们感念高力士辅佐先帝有功，准许其陪葬泰陵。
高力士的墓地现存于陕西省的一个村落，是唐玄宗唯一一个陪葬陵，于1999年发掘出土，然而当时的保护措施并不完善，经过风化之后，墓地中的许多文物毁坏严重，直到2004年陕西省文物局出面，建成高力士墓地博物馆，占地约18亩，这里成了一代贤宦最后的归宿。
