尔朱荣要把自己家乡的人派到河南各州做官,拟好名单让孝庄帝过目,孝庄帝不同意,又派元天穆当面要求,孝庄帝还是不同意。元天穆说:"天柱将军大功在身,又是宰相,就算要把天下的官全换了,陛下也不可以违背,现在不过换几个人而已,为何不行?"
孝庄帝气不打一处来,正色道:"天柱将军如果不想为臣,那就把朕也换了吧;如果他还想为臣,那就没有替换天下百官的道理!"尔朱荣听说后,大怒:"天子是靠谁立的?如今居然不听我的话了!"
孝庄帝在朝上受尔朱荣势力的压制,回到宫中又要被尔朱荣的女儿尔朱皇后斥骂。尔朱皇后有了身孕,整天说孝庄帝不识抬举,还敢宠幸其他嫔妃。孝庄帝让尔朱世隆去给皇后讲道理,皇后却说:"天子是我家立的,居然这么搞;父亲本该自己做皇帝,现在哪有那么多麻烦!"尔朱世隆也在一旁附和:"是啊,是啊。要是堂兄做了皇帝,我也早封王了!"
当初,各地叛乱不止,孝庄帝不得不倚仗尔朱荣的力量,只好妥协让步。现在叛乱都解决了,他越来越忍不住这口恶气,想方设法要扳倒权臣,做名副其实的皇帝。孝庄帝虽是傀儡,却很有办法。在尔朱荣重重眼线之下,他还是联系了几位憎恶尔朱荣的大臣,包括城阳王元徽、侍中李彧、侍中杨侃、尚书右仆射元罗等人,共同谋划杀掉尔朱荣。
尔朱世隆觉察到孝庄帝不太对劲,就故意写了封匿名信,说天子与大臣密谋杀太原王(尔朱荣),警告尔朱荣。尔朱荣不屑一顾,说:"尔朱世隆太没胆了,谁敢杀我!"他根本不把皇帝放在眼里,反而宣称要进京照顾皇后生产。