这一百三十杖，并没有起到教育的效果，高延宗我行我素，从搞恶作剧发展到了杀人，“又以囚试刀，验其利钝”，拿狱中的囚犯试刀，以此来检验一下刀的锋利程度。一时间，很多不该杀的囚犯死在了高延宗的刀下。高延宗“骄纵多不法”的行径，影响极坏，就连擅长残害宗室、沉湎美色、宠信小人、不思国事的九叔武成帝高湛都看不下去了，派人“挞之，杀其昵近九人”，从此以后，高延宗“深自改悔”（《北齐书》），完全变了个人。后主高纬即位后，大肆屠杀宗室，高延宗不得不韬光养晦，慢慢养出了一身肥膘。
体型臃肿，招来了人们的讥笑，却也躲过了高纬的猜忌。高纬“美容仪”（《北齐书》），与高延宗有天壤之别。在高纬看来，高延宗虽有几分蛮力，有几分智谋，但形象太龌龊，不可能成大事，更不可能威胁皇权。胖，是件坏事，不料反倒成了高延宗的护身符。此后，高延宗安享岁月，历任司徒、太尉等职，越发心宽体胖。如果不是国家遭难，高延宗在平淡中养尊处优、寿终正寝，应该不是什么问题；但是，当北周铁骑杀过来的时候，高延宗的人生轨迹也随之在风雨飘摇中跌宕起伏，在平庸中谱写出了可歌可泣的篇章。
北齐武平七年（576）十月，周武帝宇文邕亲率大军进攻北齐，先下晋州（今山西临汾），兵锋直指平阳（今山西临汾西南）。面对强敌，高纬抱头鼠窜至晋阳（今山西太原），并准备再次北逃。大臣们联名劝高纬留下来，压住阵脚，鼓舞士气，挽回败局。高纬一心逃命，便任命高延宗为相国、并州刺史，总摄山西将士，托付高延宗“并州阿兄自取，儿今去也”，意思是说，我要走了，山西就交给堂兄你了。高延宗力劝高纬“为社稷莫动”（《北齐书》），以免影响军心，可高纬哪里顾得上这些，连夜逃亡邺城（今河南安阳北）。
