北周与北齐对战多年，北齐阵营中的名将斛律光乃是北周伐齐最大的阻碍。斛律光被称为"落雕都督"，以治军严明、善于骑射闻名，与同样备受拥戴的宇文宪旗鼓担当，也是北齐"军心"所在，当时的对战中北齐久攻不下，北周以计陷害斛律光有谋反之心，挑拨其与高纬的关系，最终，高纬听信传言，下令斩杀斛律光。
而没有的斛律光的北齐，面对来势汹汹的北周毫无抵抗力。公元576年，宇文宪与宇文邕顺利在汇合，北齐守将韩建业投降，北齐覆灭。
班师回朝后的宇文宪却并未真正放下心来，唯恐自己功高盖主，为周武帝不满，常有功成身退之心，但是，都未被宇文邕同意，反而，加封他为大冢宰，晋爵位为齐王。始终不曾放下心的宇文宪在周武帝征战稽胡时，称病不愿随其出征，不愿再立军功。但是，如此刻意为之的宇文宪，终究没有逃出他既定的命运。
公元578年，周武帝亲征，也就是在这次途中周武帝病倒，在回到洛阳后病逝，时年三十六。宇文邕之子宇文赟继承帝位，继位后的宇文赟不再如之前所表现出来的恭谦有礼，反而，沉迷享乐，立五位皇后，甚至，禅位于仅七岁的儿子宇文阐，自己专心当上了太上皇，安心享乐。此时的宇文宪虽然巴不得当个隐形人。
