早在嘉靖年代，戚继光在他担任蓟镇总兵时就说："铳尽发则难以更番，分发则数少而不足以却聚队。手枪打造腹口欠圆，铅子失制，发之百无一中，则火器不足以与彼矢敌矣。"这句话的意思是，明军手中的火器基本上只能发一枪，根本不能有机会发第二枪，此外，当时的配发也非常有限，根本不足以制伏敌人。
其次，这些火器实际上是无用的，不是制造水平低，规格错误，铅子塞不进去，就是火药不管用，打一百枪也不可能击中一个人。即使一个人被击中也没用，蒙古人仍在骑马冲过来砍杀，杀伤力太有限。
事实上，不仅仅戚继光这么说，之后的明军将领和大臣们多次上奏，都听到了"火器无用论"。如万历末年的兵部尚书薛三才说："内库所贮铜铸火器如灭虏炮、佛朗机之类，略一试用，便既炸碎。"问题是什么呢？质量太差了，敌人没有炸到，先把自己人炸死了。
崇祯王朝的火器专家孙元化也说："我铳炮不能远于敌之弓矢，故不能胜敌。中国之铳唯恐不近，西洋之铳唯恐不远。"这是另一个问题吗？火器的射击距离是有限的，等人家的骑兵达到射程，人家的箭也到了。
