而此时，城墙上的石虎也正在朝下观望。之前他凭着战斗狂热，一路杀退城中守军。守军本来并非精锐，面对强敌是有些畏惧情绪的。
现在石虎残暴的声名在外，守军不免更加害怕，而有些新入伍的战士有些甚至转头逃跑。所以石虎一路冲锋，竟然没有多少阻碍，简直要复刻在苦县攻城战时的场景。
在这样顺畅的进攻下，石虎只想快速夺下谯城，而忽略了城外发生的事情，夔安处前来报信的士兵，他也一概置之不理。
石虎的进攻在靠近西门处终于被遏制住了。桓宣亲自上阵，与石虎的亲卫缠斗，而城中的守备部队，在王雍容的指挥下，正朝着城墙内侧射箭，石虎的军队挤在城墙上，一时成了靶子。
更糟糕的消息，则是王仲坚带着城中的警备部队，趁着石虎全力进攻西门之际，在城外水师的配合下，出其不意地重新夺回了北端的矮墙。
见士卒在弓弩下伤亡惨重，石虎不禁暴怒异常，恨不得生吞了谯城西门。但桓宣守备有方，竟不得前进半分，一时进退两难。他回头一望：“传令的，快去找夔将军！再给我一千人，我就能拿下谯城西门！”
“夔将军撤了！”传令兵回复道。
“什么？你说什么？”石虎又惊又怒。
“之前通知过少将军几遍了，夔将军说大营受到桓景突袭，现在已经后撤了。他让少将军赶紧从城墙上撤下来，去城外和他会合。”
石虎这时才来得及向城外望一眼，只见涡水上满是舟楫，而大营处已经升起桓景的旗帜。夔安的军队则弃了大营，正在接近谯城南边。
“他夔安能来城南，为何不能派士卒增援城墙呢？”
“大将军营中爆发瘟疫，下令让我们撤军。夔将军决定了，用少量士兵在大营牵制住桓景，只是为了来和少将军合军回汝阴。”
“这么重要的事情，你怎么不早说！夔安怎么不和我商量！”石虎一边怒斥，一边喘着粗气，竭力掩盖心中的惶恐。他明白夔安是对的，即使占领谯城，也再无意义，现在必须立刻撤军。但情绪上却不能接受。
“之前早就一直在通知了，只是少将军始终不应......”传令兵絮絮叨叨地解释着。
石虎听闻此语，又羞又恼，竟转过身，一斧子将传令兵的头颅砍下。
他提起头颅，向身后士兵大喝道：
“就是此等不愿尽心竭力之人太多，我们才攻不下谯城！现在撤军！”
他还来得及将责任推到传令兵上，在他殿后之下，贼军从城墙上缓缓撤下，双方的尸体铺满了城墙。
夜幕已经降临，石虎一刻不敢再在谯城城下多待，一与夔安相会，就连夜率领士卒向南撤退。
桓景因为兵少疲惫，便没有再追击。