英制重炮的攻势基本上已经摧毁了候潮门上的防守，城门正面大约一百多丈宽的城墙垛口都已经被击碎，清军的火炮也大半无法再开火。
吕宪华见攻城条件已经成熟，下令重炮暂停轰击，让攻城部队向前靠近城门。
候潮门是常见的中式城门，城门外有护城河，河上的吊桥早已收起。吕宪华的计划是，等队伍靠近护城河时，用火枪和弓箭压制城头上的清军，然后用火炮轰毁城头的吊桥绞盘，让吊桥落下，这样就能越过护城河，使用攻城锤攻击城门了。
城头上的清军显然是被郑军猛烈的炮火给打怕了，一部分人撤向两侧，在离城楼较远的城墙垛口里隐蔽，准备用火枪和弓箭反击，另一部分干脆下了城楼，在城门后面堆砌砖石，因为郑军会使用攻城锤是可以预料的。
日军在岛津久治的指挥下缓缓向前推进，到达预定位置后，便开始向城墙上发射火枪和弓箭，城头上的清军也开枪射箭还击。清军倚仗垛口，日军倚仗盾牌，防护都很严密，因此相互并没有造成什么杀伤。
吕宪华见火枪兵和弓箭手能够牵制住守军，便示意傅成和入来院重治开始攻击。
日军的大筒是仿制葡式红夷大炮，口径和管长普遍会改得小一些，相应地也轻便一些，容易搬运，适合日本人的体型。这一次萨摩军团带来了大筒一百二十门，登陆之后就已经全部从船上卸下，现在所有的大筒排成四行，形成一个威风凛凛的阵列，朝着城头开火。
日式大筒的准确性不怎么样，但架不住数量实在太多，几轮齐射之后，城楼上的两个绞盘就都被击毁了，系着吊桥的铁索一下子松了，吊桥也就坍塌了下来，狠狠地砸在护城河岸上，好在并没有损坏。
眼见吊桥落下，吕宪华马上下令掩护攻城锤攻击城门。日军的盾牌兵排成紧密的队形，掩护着攻城锤通过吊桥，达到城门下方。
所谓攻城锤，就是一根粗大的圆木，头上包了铁皮。很多时候，会把攻城锤装在车架上，再加上顶棚，这样既便于推行，又可以防备火枪弓箭。但这样大型的东西对于船运来说不太方便，因此日军的攻城锤仅是一根圆木，套上绳子，由十六个士兵两两成对扛起，利用速度冲击城门。
城上的清军还在开枪放箭，但奈何不了盾牌墙，日军也不断还击，保护着攻城锤。
“当！”“当！”
攻城锤一记一记撞在城门上，即使城门后的清军拼命用砖石重物顶住，城门还是晃动了起来。
“当！”“当！”
攻城锤继续撞击，有十几个悍不畏死的清军又重新爬上城头，向下丢掷砖石，岛津久治当即下令大筒又一轮射击，好几个清军中炮直接掉了下来。
“再加把劲，马上就撞开了！”吕宪华愤怒地大声喊道，完全没有意识到日军听不懂他在喊什么。
当然，日军尽管听不懂，但还是非常卖力地撞城，在连续三十几下撞击之后，“咔嚓！”一声，城门的门闩终于被折断，两扇城门因着被撞击的惯性，向着两侧缓缓打开。
“冲！”岛津久治一下抽出佩刀，命令日军向城里冲锋。
项绍宽和郑克臧从江岸边回到营地，就远远望见，刘国轩正与清军展开激战，而且有一些伤亡，伙兵们用担架把伤兵抬回营地，陆陆续续已经有一百多人。
郑克臧见状，强烈要求去望江门前看看。项绍宽也担心战场形势，便让郑克臧戴上头盔，穿了皮甲，和自己一起过去。
刘国轩把两门英制重炮交给吕宪华之后，就停止了攻城，在离望江门一里多的地方修筑野战工事。没有了重炮的威胁，清军不一定选择困守，很可能出城野战。
事实上他们也是这么做的。
杭州是江南大都会，人口众多，城门之外也有大量民房，与种植蔬菜的农田交相错落。战事一起，居民纷纷逃离，刘国轩就利用了一部分民房，加上木质拒马和沙袋，筑起临时工事。
清军见郑军停止进攻开始固守，显然也调整了思路，打开城门冲出城来迎战，步兵列成阵势缓缓推进，骑兵向两侧迂回，但并不靠近郑军的阵地，而是远远地射箭。
等项绍宽赶到时，清军已经发起了好几次冲锋，双方用火枪和弓箭对射。郑军的优势，是亲兵镇的三个营配发的是克利斯布买来的燧发枪，比清军的火绳枪领衔大约三十年左右的，发射速度更快。清军则依仗着弓箭能力的优势和骑兵的机动性，不断打击郑军。
“接下去怎么办？”许耀气喘吁吁地从战线的另一侧跑过来，“清军连续冲击我军防线，已经伤亡了几十个弟兄了，不如冲出去和他们拼了！”
“不行！”项绍宽和刘国轩异口同声的否决了许耀。
郑军四千人马，战兵占七成，所以大致是两千八百战力。清军目测有一千三、四百人，看长相是满人为主。郑军数量上占优势，相互对射并不吃亏，但是冲出工事的话，八旗骑兵的威力就会显著放大。
“继续放铳射箭，火炮也再打几发。”刘国轩命令道。
“师父，现在这样两军胶着，有什么好办法吗？”郑克臧急得额头上已经有了汗水，年轻人性急气盛，一时无法取胜就有些心浮气躁。
项绍宽没有马上回答郑克臧，而是仔细地观察了一眼战场上的情况，才缓缓说道：“越是两军胶着，越是要沉住气，等敌军先犯错误。”
岛津久治就犯了一个严重的错误。
撞开城门之后，岛津久治就下令日军向着城里冲锋，不料之前凭着英制重炮和大筒的火力优势，日军顺利地攻破了城门，但一旦进入接触战，日军身材普遍矮小，格斗技术和力量都不如清军的弱点就马上暴露了出来。清军从城门里发起了冲锋，日军很快陷入劣势，丢下了三十多具尸体，并且被清军反推出了城门洞。
城门口地方狭小，双方兵力交杂，岛津久治想要开炮，又担心伤及自己的士兵不敢乱来，急得吱哇乱叫。吕宪华担心城里清军趁势大量冲出，自己反而抵挡不住，便问英国炮手，能不能对准城门洞来一炮，尽量不要伤着自己人。
英国炮手反复观察了一番，回答了一句“Let me try.”，然后装填了一发炮弹，仔细地调整了角度，“轰！”地一声打了出去。
候潮门的城门洞有大约6米高，炮弹不偏不倚，正好穿过城门洞，打中了城里的一群士兵，被击中的士兵当场毙命，身边被捎带的也摔得不轻。清军马上意识到，在郑军的重炮面前，冲出去是送死的行为。于是也不再恋战，一个冲锋把日军打得纷纷倒退，然后趁机退进城里，把城门再次关上，并且换了一支新门闩。
吕宪华见城门重新关上，只能承认这次进攻失败了，下令日军撤回来，并且砍断吊桥上的铁链，不让城里的清军有修复绞盘的机会。
“吕将军，怎么不打了？”傅成跟着日军撤了回来，一脸沮丧，显然是因为错过了立功的机会。
“就算打开城门也攻不进去，再想别的办法吧。”
“唉，可惜没有云梯井栏，否则还能爬上城头作战。”傅成叹息着说道。
“算了，打了那么久，士兵们想必也又累又饿了，先撤回营里吃饭休息吧。”吕宪华说着，看了看腕上的表，“我靠，不知不觉，已经一点多了。”