辛弃疾听到这个消息,又是痛心,又是气愤,一定要除掉叛贼,为耿京报仇。他跟海州的守将一商量,就有不少将士自动要求跟辛弃疾去
除奸。辛弃疾带了五十名勇士,一起骑马奔向济州。
辛弃疾的队伍到了济州官府,叛徒张安国正在里面设宴请客,一听是辛弃疾来了,有点心虚,但是一时还弄不清他们的来意,就吩咐兵士让他们进来。
辛弃疾和同去的勇士闯进大厅,看见张安国跟一些叛将正在宴席上喝酒作乐,气得眼都红了。他们也不跟张安国说话,拥了上去,七手八脚把张安国捆绑起来,拉出衙门。等济州兵士赶来的时候,他们已经把张安国缚在马上。
济州的兵士见了辛弃疾威严的神色,没人敢动手。辛弃疾当场向兵士们宣布说:“朝廷大军马上就要来了。大家谁愿意抗金的,参加到我们队伍里来吧!”
济州的兵士多数原来跟过耿京,听到辛弃疾一号召,有上万人愿意跟他们走。辛弃疾立刻带着义军,押着叛徒,直奔南方。