隨著明軍占領港口西邊的三座炮臺后，正在與明軍主力交戰的倭寇大軍也開始逐漸顯露疲態。
因為倭寇大軍作為主力的一千武士，此刻，只剩下不到兩百人，哪怕倭寇依然占據著人數上的優勢，但卻被明軍刀盾手和長戟兵壓著打。
很快，一名倭寇足輕開始不自覺的往后退，隨即，大量的倭寇足輕也開始同時后撤。
張小六注意到倭寇的陣型出現松動，大聲喊道：“倭寇怕了！隨我沖啊！”
隨即，張小六快速沖上前去，用盾牌格擋開倭寇足輕的長矛，在地上一個翻滾來到敵人近前，一個利落的斜劈，直接砍死了敵人。
剩下的明軍也被張小六的勇氣所鼓舞，紛紛沖上去，頃刻間，倭寇的陣型就被沖散，本就有些軍心不穩的倭寇大軍瞬間陷入混亂，部分足輕開始轉身逃跑。
明軍發現倭寇陷入混亂，還在保護炮兵的五百火槍手也紛紛抽出腰間樸刀，加入到了戰場之中。
同時，攻陷西邊三座炮臺的明軍連長，帶著剩余的七百余人，也從側面加入了戰斗，更是加快了倭寇大軍的崩潰速度。
而倭寇大軍后方的鐵炮手由于被友軍遮擋視線，再加上逃跑的友軍直直的沖向鐵炮手的軍陣，更是讓倭寇的一千鐵炮手無法及時開槍。
等到倭寇鐵炮手的指揮官下令開槍擊殺逃兵時，一切都已經晚了，潰兵沖散了倭寇鐵炮手的陣型，明軍也緊緊跟在倭寇潰兵的身后，沖入了倭寇鐵炮手的陣型之中。
由于倭寇鐵炮手只裝備了火繩槍，面對明軍的近戰攻擊，根本無法抵擋，一觸即潰，瞬間加入到了潰兵的行列。
“砰砰砰！”
直到此刻，明軍的火槍手才開槍射擊，由于此前的奔跑和戰斗花費了太多的氣力，一些明軍火槍手眼看無法追上逃跑的倭寇，直接站在原地填裝彈藥，對著逃跑的倭寇開槍。
一些跑不動的倭寇，直接丟下武器打算投降，卻被追上來的明軍士卒一刀斃命。
而港口東面四座炮臺中的倭寇眼看大部隊都被擊潰了，他們也紛紛從炮臺中跑了出來，向著城外跑去。
追擊的一部分明軍，看見炮臺中的倭寇逃跑后，沒有繼續追擊倭寇，而是立馬占領炮臺，這些西式炮臺對艦隊造成了多大的傷害，他們可是有目共睹的。
戰斗從白天打到黑夜，整個港口都因為戰亂陷入了恐懼之中。
港口內，只要是倭人打扮之人，統統都會被明軍殺害，使得港口內居住的數千倭人百姓不得不跟隨潰兵逃離此地。
直到第二天清晨，戰斗才算是徹底結束。
此戰，明軍斬殺倭寇六千五百七十七人，其中包含三千港內的普通居民，己方陸軍陣亡七百八十人，輕重傷五百五十六人，四千步兵經此一戰，可戰之兵還剩下兩千余人，可謂是損失慘重，已經無力繼續進攻屋久島上的安房港，但防守宮之浦港還是可以做到的。