在1853年，太平军北伐的时候，林凤祥就奉命与李开芳、吉文元统率2万余人从浦口出发，一路经安徽滁州北上。6月份，攻克河南重镇归德，击溃了清军5000余人，同时缴获了大批的铁炮、火药。
之后度过黄河之后，又包围怀庆，内部攻打坚守城门，外防清援军，与敌方反复的争夺，但是也未能破城，延误了战机。在9月份的时候，就撤围进入山西，抵达洪洞，然后东插太行山，在9月底的时候就破了临洺关。进入了河北的境地，当时清廷大震，在河北进行了拦截，调兵阻止北伐军北上。
但是当时的李开芳与林凤祥一路率军进攻南京，所向披靡，接连的攻占了安徽、湖北、河北、河南等几个重要的城市，可以说这是两人在当时值得一提的伟大功绩了。
