南宋朝廷無心作戰，虞文輝大軍所指，連戰連捷，此時南宋終于反擊，尤其是兩位抗元名將，正是余玠和張鈺，在歷史上都曾大敗元軍。此二人用兵犀利，連戰連捷，羽沖恒終究出身草莽，兵法遠不及對手，一度退出了明州城。
羽沖恒雖然不敵宋軍的反撲，卻把明州所有的海船都帶走，甚至把明州大多數人的口都撤出，讓宋軍得了一座空城。
歷史上，南宋雖然對蒙古有勝有敗，但因為人口充足，屢次大戰之后，都能重新征召大軍反擊。
但虞文輝的授田制度，卻讓大多數漢人更愿意在他治下生活。畢竟有的田種，生活無憂，不須顛沛流離，名義上也非是在異族治下。虞文輝把自己是名人之后的優勢，宣傳的淋漓盡致，甚至把自己的家譜都明目張膽的貼滿了每一個城池的醒目處，深入每一個村落，所以這些漢人并不以被他統治為羞恥。
漢軍收復了明州，卻發現此戰所獲，就連消耗的軍糧都沒法補充，更是一艘海船都不能搶奪回來，經過商議之后，四路大軍留下兩路鎮守，另外兩路去尋機跟蒙軍決戰。
虞文輝所部跟這兩路大軍交戰數次，雖然互有勝負，但虞文輝卻每次大戰都能補充軍隊，補充軍需，這兩支漢人軍隊雖然勇猛，卻得不到支援。
雙方酣戰數十場，虞文輝趁機調動另外一直兵馬直撲臨安，宋理宗大驚之下，派人出城談判，虞文輝當即索要兩路宋軍的將領，并且許以三座城池為代價。
宋理宗權衡之下，居然答應了，親自下令把兩位兩路宋軍的統帥召回，送入虞文輝大軍之中，虞文輝得了這兩名將領，如約退兵，真的還了三座城池。
這一次合議，讓虞文輝名聲暴漲，南宋民心軍心盡失。
此戰之后，虞文輝得了便宜，每遇到低檔不得的宋軍，就跟大宋朝廷以城池換人，屢屢得手。因為虞文輝的這個戰術，大宋朝廷居然失而復得了十余座城池，頓時君臣彈冠相慶，只覺得用幾個軍漢換了這么多城池，實在是大大便宜。
甚至到了后來，虞文輝欲攻打那座城池，只要兵馬到位，宋朝就會派人送上名單，讓他挑選將領……
虞文輝在兵圍襄陽的時候，南宋朝廷甚至把后世主持襄陽防御的呂文煥，送到了他的手里。此人在歷史上主持襄陽之戰，力扛蒙古大軍六年，最后是因為得不到支援，又被蒙人以阿拉伯炮投入戰斗，不得已才投降，也算是難得的將才。
到得后來，不用朝廷送，就有大批將領帶了手下士兵倒戈。
虞文輝逐步壓縮之下，伐宋之戰的第三個年頭，南宋所控的城池還有三十余座，但是人口已經跌至百萬，就連糧食都無法滿足需求，不得已跟虞文輝商議購買。
虞文輝更是開啟了以子民換糧食的先河，尋常百姓一人可換糧食一斗，從軍將士可換糧食一擔，讀書人和將領可換糧食一車！
只是一月光景，南宋人口就暴跌二十余萬，好多城池干脆就沒得活人，只剩下空綽綽的鬼城。
這種時候，不光是虞文輝，他手下的所有將領，就連南宋的朝廷都知道了，大宋已經窮途末路。
這一日，虞文輝正在算計，自己還有多久能夠完成“毀滅南宋”這個任務，忽然有親兵來報，說有一個道人來拜訪。