当时内阁的一个大官，因为自己的儿子参加考试的事情，就和当时的主考官进行了沟通，要求放自己的儿子一马，让儿子可以中举，但是当时的主考官没有和这个大官同流合污，非常公正的进行了考试，结果这个大官的儿子果然没有考上。这个大官就怀恨在心，诬告了主考官故意的偏袒其他人，让其他人成功的中举了。后来高知道后，也是亲自的审阅了卷子，发现主考官并没有偏袒任何人，所以成功的阻止了这个大官的诬告。
后来皇上在御驾亲征的时候，不小心被抓了，发生这种事情，谁都不愿意看到，不过不能没有皇上，所以皇上的弟弟就坐上了皇位，也改了国号了。敌军非常的狡猾，看到皇位已经变更，又把抓走的前任皇帝给送回来了，这一下就让朝廷上下都乱套了。皇上看到亲哥哥回朝，不仅没有迎接，反而是要求把哥哥安置在偏远的地方监控起来，并且对待哥哥的待遇也非常的低。当时高知道之后，就马上觐见皇帝，要求即便是不归还皇位，也要好好对待前任皇上，虽然当时皇上没有听从他的劝告，却也没有因此而迁怒于他。可见他在朝廷中的威望还是很高的，敢于直蹇。
过了没有多久，皇帝哥哥在大臣的拥护下，居然成功的复辟了，又抢夺了自己的皇位，他上位之后的第一件事情，就是把当时皇上的很多亲信都除掉，一解自己心头之恨，可是非常意外的时候，新皇上对于高却丝毫没有怨言。不过这个时候，高也知道朝廷中非常的危险了，已经不能久留了，所以他就从此告病回乡，开始了自己的养老生活了。在他回家之后，皇帝还经常在朝廷上回忆和称赞他，表示高谷为朝廷付出的太多了，而且对于自己也非常的忠臣，曾经还要求过前任皇帝迎接自己，可见他有着非常忠诚赤子之心。于是皇上还赏赐了很多的财宝银两给他。回家之后，高也没有议论过任何的朝廷事情，一直到七十多岁，才终老于故居。纵观他的一生，经历了五任皇帝，可谓是凶险至极，却能够安然处之，真的非常不简单。
