他知晓外国的工业技术比中国先进，于是为了修建兰州黄河大桥，他花费了整整30万白银，还多方辗转，托人介绍靠谱的外国建筑师。不过升允为人耿直，特别看不惯趋炎附势的人，所以他在朝堂上没有什么深交的好友。
1905年，慈禧过70大寿，在紫禁城举办宴会招待大臣和各地来宾，寿宴奢靡至极，花了将近百万以上的银子。所有的大臣都借机恭维慈禧，赞美之词不绝于耳，送的礼物更是一个比一个华贵，可是轮到升允的时候，他却什么礼物都没拿出来，还直接进言让慈禧不要太过铺张浪费，虽然话说得委婉，但最终还是惹得慈禧很不高兴。
1909年，清政府准备实行立宪制，升允对此事持反对态度，经常明目张胆的在朝堂上公然反驳，因为次数过多，言辞激烈，升允最终被革职了。但是溥仪刚登上帝位，还是一个小孩子，所以升允并不生皇帝的气，他只是觉得朝堂上的大臣们愚昧无知，蒙骗了皇帝太后。
被革职的升允相当乐观，他依旧勤加练武，等着皇帝反应过来之后重新召他回朝。1911年，全国各地纷纷吹响了反清的号角，浙江、安徽、湖南、山西、贵州等多地省陆续宣布脱离清政府的管制，这时候朝廷真的慌了。
