27日，刘铭传再次发动进攻，利用开花大炮摧毁太平军防御工事，连破东北门外营垒十余座。接着，郭松林、张树声、周盛波抵达战场，攻破西门外营垒，截断了常州与丹阳之间的联系，一步步缩小包围圈。
西门外营垒陷落，常州联系丹阳之渠道被截断，太平军无法向城内运输粮食。陈坤书向天京发出求援信，希望洪秀全能派兵前来，内外夹击淮军。为此，洪秀全派章王林绍璋、忠二殿下李容发、列王林彩新等率2万兵马增援常州，攻打西面奔牛镇，试图打通粮道。
1864年1月7日，太平军增援部队杀向奔袭，扎营数十座，直接向淮军郭松林部发动猛烈进攻。李容发，李秀成养子，刚20岁出头，打仗十分勇猛。交战时，李容发率2000兵马绕道淮军侧后，发起突然进攻，郭松林被击败，淮军死伤千余人。
击败郭松林，李容发乘机夺取石桥湾、罗墅湾、孟河汛等战略要地。9日，刘铭传部投入战斗，与李容发激烈厮杀。此时，林绍璋稍遇挫折便退出战场，致使太平军阵脚大乱，被淮军反杀，损失四千余人。
