武则天称帝后，薛怀义也因此顺理成章地成为武周建国的大功臣，官拜正三品的左威卫大将军。
但是薛怀义此时志高气满，并开始厌倦武则天起来（毕竟老了）。很少去宫里陪武则天了，多居白马寺，并广度年轻力壮之人为僧，每天也不在寺里念经，跑到街上去，骑着高头大马，在洛阳城里横冲直撞，路上行人纷纷躲避。谁要是躲得不够及时，马上就被他们打得头破血流。然后，扔在路边，扬长而去，根本不管别人死活。
特别是看到道士，更是分外眼红，一定要把人家抓过来，剃光头发，陪他一起当和尚，有时候连道教的高级人物也不能幸免。当时有一位著名的道士，叫做候尊，是弘首观的观主，有一次不小心被薛怀义看见了，把他拉进寺里去，强迫当了好几年的和尚，直到薛怀义死后，这才出来，再重新蓄发当道士。
薛怀义对官员也挺不客气的。当时有一们御史看不过他的所作所为，多次依法弹劾他，冯小宝一怒之下，把这人堵在路上，打了个半死。这类为非做歹的事情干多了，有时候也会碰钉子。
