宋太祖赵匡胤喜欢在后园弹鸟雀。一位大臣声称有紧急国事求见，赵匡胤一听有紧急事，马上放下了弹弓，召见这位大臣。不料，并没有什么急事，只是普通的一件小事，于是，赵匡胤很生气，责问他为什么欺骗自己。这位大臣趁机回怼他说："臣以为再小的事也比弹鸟雀要紧。"借机提醒赵匡胤不能因为玩乐耽误了朝政。赵匡胤一听，更来气了，就用斧子柄砸向这位大臣，正好打中了他的嘴，直接打掉了两颗牙齿。这位臣子没有叫痛，反而不紧不慢的捡起自己的牙齿，揣在怀里。
《涑水纪闻》中没说赵匡胤给张霭道歉了，只说"出为河中府判官"， 河中府即现在的山西省永济县蒲州镇，从中央到地方，职位又没有太大提升，这算是被贬官了。可见赵匡胤虽然没治张霭的罪，但也不想再看见这位耿直的御史了，直接打发出京。直到赵光义登基，张霭才被召了回来，很得赵光义的信重，做到了御史中丞，后又任大理寺丞（即大理寺三把手）。
赵匡胤见状是愈加气愤，质问说："你把牙齿放在怀里，是想当做证据将来告朕吗？"张霭不慌不忙的回答道："臣不敢告陛下，但今日之事我准备和史官聊一聊。"赵匡胤没想到张霭会如此回答，是直接被搞懵了，当然他也知道自己已经犯了错误，为了挽回自己的光辉形象，于是便急忙和颜悦色的向张霭赔礼道歉，并命人赏赐金帛以表彰其直言进谏。
