次日一早，桓玄下令兵马开拔南下，前往江陵。
殷仲堪亲自前来相送，又说了不少场面客套话，直到看着桓玄的兵马离去，殷仲堪顾左右而笑道：“这便走了？如此简单？我还以为他会反悔呢。”
殷遹笑道：“他再不要脸，也不能赖着不走。兄长，眼下该对杨佺期动手了。我请命，率骑兵五千前往追击。”
殷仲堪点头道：“好。你且率骑兵追击，我和旷之率步兵随后便到。那杨佺期此刻急着回援，无心恋战，你可进而击之，给他些教训。”
当下荆州军点兵出城，调集船只。殷遹率五千骑兵渡沔水率先追赶，殷仲堪率三万步卒随后跟进。
两天后，殷遹率骑兵追至筑阳。斥候禀报，敌军兵马昨日抵达此处，距离已经不远。殷遹下令急追，骑兵沿着官道一路追至城西武当山下，但见山路上只散落盔甲兵器无数，殷遹闻之大笑。
“哈哈哈，杨佺期的兵马已经丢盔弃甲了。他们已经毫无斗志了。”
不久后，前方斥候传来消息。在前方山谷之中，发现敌军营地。杨佺期的兵马显然已经精疲力竭，正在十余里外的山谷歇息。
虽然日光西沉，但是殷遹还是决定发动进攻，杀对方一个措手不及。骑兵沿着山道疾驰数里，抵达山坳上方。殷遹策马立于高处眺望前方，果见夕阳之下，弯弯曲曲的山道通向前方数里外的山谷，山谷里帐篷林立，炊烟缭绕，正是杨佺期的大营。
殷遹纵声大笑，沉声下令：“所有人，准备进攻。给我踏平他们的营寨，杀他们个血流成河。”
有人提醒道：“将军还是加以小心，此去山道两侧林木茂密，若有伏兵，则后果不堪设想。还是应该先命人去两侧山林搜索一番。况且，这山道狭窄，不利于我骑兵冲锋。若是能等明日敌军出了这片山地，可驰骋进攻，畅通无碍。”
