此時楚軍眼看攻城船被點燃，也有些慌了起來。
主要是之前所有人都以為攻城船是個不沉的移動城堡，對其報以重大的期望，因此突然起火，眾人心理上失去防備，這才開始慌亂起來。
甚至不少已經攻上城頭的楚軍，眼看攻城船起火, 竟慌忙向後逃去。
火越燒越大，很快傳播至船上各處，甚至延伸至塔橋之上。
此時杜睿正在塔橋上與尾隨的楚軍激戰，眼看大火如襲涌一般，沖向他這個方向，他也顧不得其他, 忙掉頭就走。
但火不需要追上他, 因為這火早就燒毀了塔橋另一側。
只見塔橋搖搖晃晃，「 里啪啦」一陣聲響, 很快便折斷向下墜去。
而杜睿身穿鐵甲，行動不便，到了城頭，還沒有躍下，便被下墜的塔橋一掀，然後跟著往下墜。
就在這千鈞一發之際，黃維烈眼疾手快，一把抓住杜睿，而杜睿數百斤的重量下墜，力量霸道，黃維烈也差一點被他帶下去。
而其余人紛紛上前，才將杜睿給拉了上來。
隋軍在其余諸處塔橋亦如法炮制，這些塔橋亦遭受到跟此處差不多的命運，紛紛被燒毀。
船上的楚軍拼命地救火，但根本沒有意義。整座攻城船是座木質的船只，防火功能是防外不防內的。
此時大火幾乎是從最中心往四面擴散, 等到各處楚軍發現，整座攻城船已經成了火海, 無法挽回了。
很快，這攻城船在大火之中被燒毀。船上士兵，尤其是上面箭樓處的士兵，多沒能及時逃月兌，最終葬身于火海之中。
整個攻城船上，只有最初逃跑的一群人幸免，而那些拼命奮戰的士兵，恰恰是死得最慘烈的一批人，既讓人唏噓，也讓人不知該說些什麼。
有了這次的經驗，隋軍又如法炮制，將另外兩艘攻城船給燒毀。
這些攻城船巨大，其造價也昂貴，一艘趕得上普通船只十艘、百艘。林士弘家底不豐，窮盡江州諸郡之力也只攜帶了六艘，卻沒想到第一天就損失了一半。
剩下三艘，林士弘一時也不敢直接壓上了。
眼看城牆一時半會不好打，林士弘又下令從水門處突襲。
楚軍多水性好的健兒，于是林士弘組織了一只突擊隊, 沿皖水秘密潛伏，直逼懷寧城的水門。
但楚軍沒有料到，他們所面對的，是早已守候在那里的長矛隊。
楚軍士兵剛接近水門，守軍就用特制的分水長矛穿過鐵柵攻擊他們，一時之間刺死刺傷不計其數。
楚軍拼死用手抓住刺出的長矛，才擋住隋軍攻擊。
此時里面守軍的長矛刺擊停頓了下來，楚軍一時之間大喜，還以為守軍已經逃跑。誰知過了一會，里面又開始用長矛向外刺，楚軍這次又準備故技重施，便仍用手去抓。卻根本沒防備隋軍早就將長矛和鐵鉤在火上烤紅後，再用來刺擊楚軍。
于是中者無不慘叫，楚軍傷亡慘重。
至此，楚軍從水門突擊的意圖便徹底落空。
眼看東面城牆攻擊不順，林士弘便決定轉戰南面城牆，此門四面開闊，十分適合進攻。
但說實話，這並不是一個很好的選擇。
之前就說了，杜伏威義子闞稜，貌魁雄偉，善使陌刀，其勇武天下少有。
一個身高一米九甚至更高的壯漢，全身盔甲，提著陌刀，神擋殺神，魔擋殺魔，這恐怖狀，張飛、關羽來了，怕是亦有不如吧。
眼看楚軍主動攻擊南面城牆，闞稜並不準備坐以待斃，而是準備來一場突襲。
于是闞稜下令，面對楚軍攻擊，城頭箭失不得 烈還擊，只作普通抵抗。
果然，林士弘眼看南門的箭失，稀稀疏疏，木、石看似也不多，心中大喜，只覺得對方戰力不足，正好以此為破城點。
于是林士弘令人將井欄、沖車等武器全部拉到陣前，推著靠近懷寧城的南面城牆。
而闞稜等的就是這一刻。
杜伏威軍中，多是步兵，騎兵很少，但這並不意味著軍中沒有騎兵。
尤其是杜伏威投降黃維揚之後，黃維揚從隋軍之中，先後給杜伏威補充了上千匹戰馬，還有上百名精于騎射的士兵，以增強戰力。
此時這群人，全部都被置于南門內。
闞稜下令打開城門，他親自上馬，以為先鋒。
雖然闞稜並不是一個優秀的騎將，騎馬技術也一般，但他有一點旁人不具備，他 啊。
隋軍打開城門，對面的楚軍一愣，他們拼命攻擊的城門，怎麼突然打開了？正在推送攻城器械的楚軍萬萬沒有想到，城內的人如此大膽，居然還敢沖出來。
而闞稜帶著城中騎兵， 則像是殺神臨世，如耀武揚威一般，一陣砍瓜切菜地沖了上去，將前面的楚軍擊殺了大半。
至于送到城下的攻城器械，也盡被隋軍摧毀。
至于對面楚軍，根本無力阻擋。
做完這些，闞稜才帶著士兵大搖大擺地撤回城中。
隋軍這如入無人之境的樣子，看得林士弘差點氣吐血，簡直是欺人太甚啊。
于是林士弘下令 攻南門，但攻城器械損失大半，且騎兵之威，在眾人心中留下深刻影響，嚴重打擊了士氣。
南方少戰馬，並無成批量的騎兵部隊。
平日里看馬兒也挺溫順的，誰能想到上了戰場，萬馬奔騰，聲如霹靂，這般殘暴。
連續的攻城失利，嚴重挫傷了楚軍的士氣和積極性。楚軍起于豫章，所面對的都是大隋的地方部隊，戰力極弱，根本就不知道真正的強兵是什麼樣子的。
就連林士弘也泛起了滴咕，這隋軍怎麼跟以前遇到的不一樣了，那些在江州諸郡遇到的畏敵如虎，怯如雞鼠的隋軍哪里去了？
隋軍抵抗如此頑強，難道他洶洶而來，就要鎩羽而歸不成。
林士弘不願意接受這個結果，他雖然貴為楚國天子，但軍中操姓勢力極其強大，不少人還對他繼承操師乞的地位耿耿于懷，一旦兵敗，便給了操家人動手的理由和機會，這是林士弘絕不想看到的。
這幾日的戰斗之慘烈讓林士弘心有余季，他覺得應該讓部隊重新修整一下，然後重新打造一批攻城器械，再進行攻擊。