在议和的过程中，英国人拒绝与耆英会面，并拿出耆英的奏折，交给桂良、花沙纳等阅看。耆英当时被搞得很狼狈，窘困异常，无法继续参与对外议和谈判，随即他便离开了天津返回京城。
按照耆英的说法，此次对外议和，事关机密，且外国人耳目众多，不能以书面形式上奏，因此必须亲自回京向咸丰帝报告。桂良、花沙纳也认为英法对耆英颇为不满，他们对耆英的鄙视、报复，事关清廷尊严，奏请咸丰帝允准耆英进京面陈夷情。
但是耆英在未获咸丰帝允准之前，即擅自离开天津返回京城。咸丰帝闻讯后大怒，以耆英办理夷务，实属无能，于大局未定之时，"不候旨擅自回京，实属自速其死"，他命僧格林沁将耆英锁拿。惠亲王绵愉因保举不当，自请处分，同时奏请将耆英审讯后即行正法。咸丰帝命恭亲王奕?会同大学士、六部九卿共同审讯耆英。
奕?等人从大清律例的角度出发，认为耆英不候旨即自行回京，确属冒昧糊涂，不合情理。但是，耆英并非统兵将帅，而且私自回京也是担心议和决裂。遍查大清律例，并没有对清廷大员无旨擅自回京应做如何惩处的专门条文，因此奏请咸丰帝，将耆英定为绞监候。
