他们向坐镇北平的张学良请示。张学良支持黄显声进剿，明确指示抓获张学成"立即正法处决，以遏乱源"。公安总队马上出动，在高山子一带歼灭了这股匪军，把张学成当场击毙。接着，公安总队向锦州且战且退，然后与东北军一起，沿大凌河一线布防，阻止日军进攻锦州。
锦州沦陷后，中国正规军陆续经山海关撤退到关内，日本关东军便派出第二十师团，把黄显声的义勇军作为主要打击目标。
日军这个师团有一名中佐，名叫古贺传太郎，十分凶悍，被关东军吹嘘为"战无不胜的名将"，率领着一支本庄繁认为"攻无不克"的骑兵联队。古贺的骑兵侵占了锦西县城，扬言要将这一带的义勇军"一举荡平"。
一天早晨，古贺派出一支三十人的部队，到锦州师团部领取弹药给养，县城只留一个小队，他自己率领七十多名骑兵向城西一带"扫荡"。黄显声的义勇军获得情报，在古贺必经的道路上设下埋伏。
上午10点钟，古贺的骑兵耀武扬威地到达龙王庙附近的狭窄路口，义勇军开枪射击。日军遭到突袭，无法展开，一时人仰马翻，古贺当即中弹死亡，只有十几个日本兵逃进县城。
