与山中形势一片大好相反，山下的局势却越来越坏。不断有零星的百姓躲过了蒙古骑兵猎杀逃来山中，也带来了山下零零碎碎的消息。据说熊犇在永康城招纳了许多土匪溃兵，也诱骗了大量逃难的百姓，现手下已有三百多名匪兵，裹胁人口近千人。城防残破的横原寨被蒙古骑兵劫掠，守寨的熊犇手下的几十名匪兵和近百余百姓或被杀或逃走，目前寨内已空无一人。蒙古军退走后，熊犇又派出少数山匪不时在横原寨附近出没，以昭示他并没有放弃横原镇的管辖。
这段时间冒着风险进山的还有崇庆府的信使。潘统制要欧阳轩调兵前往府城的信函越来越急，口气也越来越严厉了，不过这在霹雳军看来这纯属外强中干、虚张声势。虽然欧阳轩对潘统制的命令置之不理，但内心也十分同情无辜遭难的百姓。只是他也清醒地认识到，以霹雳军现在的力量，相较南宋官军的野战军队也没有多大优势，要去对抗蒙古铁骑实属孟浪。
当前霹雳军的弱小首先是人数太少。与蒙军与官军在一次战役出动几万人规模相比，霹雳军常备军只有1000人，另有半脱产的500人，即便全部出动也只有1500人，尚不及蒙军和官军的零头。霹雳军的这点家底如果到府城，以潘统制的尿性，绝对会被冲在前面充作炮灰，很快就会被消耗一空。目前霹雳军的战力分为三个部分，分别是野战营、守备营和内卫营。内卫营是由原警卫队扩充升级而来，共有400人，下设警卫连、侦察连和反谍连和锄奸连，仍由董虎任负责人。在职能上，警卫连负责军政领导人和重要机构的安保；侦察连负责收集外界的军政情报信息；反谍连负责防范各方势力的渗透和破坏，也防止先进技术的泄密。在使用间谍刺探情况和盗取技术及造谣、暗杀、放火破坏方面，蒙古人极为擅长，是一等一高手；锄奸连则是专门来对付叛徒的，甚至可以采用暗杀等肉体消灭手段。在蒙古军的招降下，宋军官兵投降的多如牛毛，毫不夸张地说攻打南宋的主力便是降将降兵组成的新附军。守备营下设了五个连500人，属半脱产的预备役性质。另外守备营还对山中16至50岁男性在农闲进行军事训练，在战况紧急情况下可将这五个连扩充到3000人。
霹雳军的短板还因为战争经验欠缺。现在霹雳军最核心的战力是由欧阳轩亲领的野战营，原有五个连加上新成立的唐向威第六连，共有六个连600余人。野战营属于火器为主的新式军队，虽然战力胜于官府厢军，也数次将熊犇匪帮打得抱头鼠窜。但毕竟成军时间太短，没有经历过恶战淬