三國志和三國演義之中就有很多武陵蠻的記載，其首領沙摩柯也是少有的勇將，關羽大意失荊州之后，馬良也是去武陵蠻搬救兵，最后被殺。
盤瓠蠻雖說已經得以開化，但之后由于一直受到漢族封建統治者的壓迫，他們開始向外遷移，并在遷移過程中，逐漸發生分離。
其中較早往西遷徙，進入黔北黔西、川南、滇東、桂西的一支，后來演化成了苗族。于隋唐時期進入贛、閩、粵三省交界地區的一支，后來形成為畬族。向南到達兩廣的則變為瑤族和壯族。
唐、宋、元、明時期，贛閩粵邊區活躍著被稱為畬族的少數民族，就是盤瓠蠻的后裔，也就是我們說的溪洞蠻。
他們在與漢族的長期接觸和交往中，互相學習，互相適應，最后融為一體，成為客家民系的一分子。
文天祥的《文山先生全集》卷一一《知潮州寺丞東巖先生洪公行狀》載：“潮與漳汀接壤，鹽寇、輋民（既私販集團），群聚剽劫，累政。”
當時“畬民”與“輋民”兩詞并用，潮州所稱“輋民”，與漳州的“畬民”，均同樣指今日之畬族，“其來久矣”，說明它經過了一個長期的發展過程。
根據文獻記載，贛閩粵邊區在“畬民”名稱之前還出現過“峒蠻”、“蠻僚”等少數民族名稱。如：《資治通鑒》卷二五九《唐紀》七五云：“（唐昭宗乾寧元年）是歲，黃連峒蠻二萬圍汀州（黃連洞在汀洲寧化縣南），福建觀察使王潮遣其將李永勛將萬人擊之，蠻解去……。”
宋元時期，畬民反抗統治或起義之事屢見于史，且有些斗爭是跟漢族的下層平民百姓結合在一起的。如：紹興五年(5)，虔州、梅州以及汀漳等地蠻僚相繼起義。
寧宗嘉定元年(1208)，“值江西峒寇李元勵竊發”，“眾數萬，連被吉、彬諸縣”，后又向廣東南雄梃進，并進逼贛州、南安軍，兵威閩粵贛地區。最后宋王朝“詔以重賞，募人討之”，起義堅持四年之久而失敗。
理宗景定二年(1262)漳州爆發了大規模的畬民起義，“群盜益深，距城僅二十里，郡岌岌危矣。”后朝廷采取剿撫并舉的方針，才把這次起義平息下去。通過這場起義，“畬民”這一名稱才首次在劉克荘《漳州諭畬》一文中出現。
畬民反抗統治階級的起義和斗爭，加速了漢畬人民的交往和融合。特別是宋末元初，面對蒙古鐵蹄的侵擾，漢畬人民聯合起來進行抗元斗爭。
宋恭宗德祐元年（元至元十二年，1275年），元兵攻破鄂州，揮師渡江，南宋震驚，詔諸路勤王。時任贛州（既虔州）知府的文天祥“捧詔涕泣”，起兵勤王，“使陳繼周（寧都人）發郡中豪杰，并結溪洞蠻；使方興招吉州兵，諸豪杰響應，有眾萬人。”
文天祥的妹婿彭震龍也組織畬民參加抗元隊伍，“……乃結峒獠起兵。天祥兵出嶺，震龍接應，復永新縣。”
當時另一位抗元大臣張世杰的隊伍中也有一支由畬族首領陳吊眼和畬民婦許夫人率領的“畬軍”配合作戰。他們“聚眾十萬，連五十余寨，扼險自固”，斗爭持續六年之久。
雖然在宋朝的歷史上，對他們的描述只是只言片語，但是溪峒蠻確是實實在在的與大宋時戰時和，貫穿在了歷史之中的。
“九溪十八洞……溪洞蠻？不對，溪洞族人。”秦檜有些驚訝的說道。
最后他意識到蠻這個字是來指代邊遠的少數民族的，實際上是一種帶著貶低的稱呼，于是馬上改口。