经过此事后，吕母的名声也传开了，官府自然会派重兵镇压。吕母丝毫也不畏惧，一边带着少许人利用地形抗击官兵进攻，同时命令其余所有人分海陆两种方式撤退，最后，大家汇聚在一处海岛。他们开始了自给自足的生活，生活是有点艰苦，但是，他们还不忘逮着机会就攻打一下官兵。
吕母带领的这支起义军，其规模越发壮大，开始引发朝廷的强烈不安。官兵的直接进攻并没有起到太大的效果，于是，朝廷就改为劝降，表示只要他们不再和朝廷对抗，回家好好种田，朝廷会既往不咎的。吕母很是干脆拒绝。但不巧的是，就在公元18年，吕母病故了。
之后，起义军的大部分人加入樊崇带领的起义军，其他的一些人则加入了绿林军。樊崇起义时间较吕母晚，他在泰山拉了起一帮人抵抗官府，由于，他生性勇猛，很多人都视他为英雄。当时青州和徐州的饥民，都纷纷投靠他，起义军的人数很快就达到数万人。
虽然，这些"兵源"有点"拼凑"的感觉，但是，樊崇很重视部队建设，严格军队纪律。这些起义军自然成了朝廷的心腹大患，于是，朝廷便派兵镇压。樊崇担心一旦交手，敌我双方的人员很难分辨，于是，就想出一个办法，将眉毛染成红色，这就是"赤眉军"的由来。
