原來桓曄請來的人中，竟有薛綜、袁徽兩位聲名卓著的中原士人，以及張重、李琴兩位交州本土的孝廉。
兩漢以來，交州荒僻，并無世家大族，歷年舉孝廉和茂才都沒有交州的份。及至靈帝末年，賈琮臨危受命，出任交州刺史，在任三年，政績卓著，于是上表朝廷，請求也在交州地區舉孝廉、茂才。朝廷下詔同意，交州從此才與其他各州一樣，有了推舉人才出仕為官的權利。
張重、李琴兩人正是當年賈琮推舉的孝廉。二人能在交州這等荒蕪之地，被賈琮慧眼簡拔而出，除了自身確有些才學之外，其家勢也都相當不錯，與地方蠻夷豪族多有來往。
劉賢此時正缺交州本土人才，當即封桓曄、薛綜、程秉、張重、李琴為從事，令張重、李琴二人協助安撫境內蠻夷，宣揚劉賢大軍的民族政策，以爭取民心。
二人領命，發動家族勢力，四處安撫夷民。旬日之內，蒼梧、郁林、南海等地便有數十家豪族夷帥前來表達了歸附之意，讓得劉賢越發喜出望外。
而自從擊敗士壹以來，合浦境內的夷民也盡皆喪膽，不敢再明目張膽地偷襲劉賢大軍了。此時軍中糧草告急，劉賢于是收住兵馬，不再前進，發文至南海、蒼梧，請趙累、蔣琬調撥糧草接應。
數日之后，蔣琬派兵押送糧草至此，并隨同送來一封書信。劉賢看信封，卻是從荊州發來的，當下急忙拆閱，隨后面色大變。將信交給龐統，道：“留守長沙的都督府長史樊友發來書信，說近日劉備、周瑜頻繁調動兵馬，意圖不明。樊友特地發文前來示警。”
龐統看完信，想了想，道：“我們進入交州已兩月有余，劉備、周瑜必然已經知道我軍南取交州的消息。他們眼紅之下，也不是沒有起兵襲擊我軍之后的可能。唯今之計，當迅速與士燮講和，然后回兵荊州，去防備劉備和周瑜。”
劉賢皺眉道：“我軍剛剛拿下了交州三郡，根基還很不穩固，若是撤兵回荊州，就怕士燮趁虛襲擊，導致交州不穩。”
龐統道：“依主公之見，又當如何？”
劉賢道：“不如我與你分一人回去主持大局，留一人在交州穩固民心。”
龐統想了想，道：“如此也好。自古民心該歸于君主，如今荊州已然穩固，只需應付劉備、周瑜便可，我就偷個懶，回荊州去吧。交州之事，暫請主公親自掌管。只需記住，恩威并施，當可內撫夷民，外和士燮。”
劉賢笑道：“軍師放心，這些我都知道。我會盡快將交州之事理順，然后回兵荊州的。交州之地，敵軍并不強大，只是山險路遠，難以攻取罷了，我就算無力進取，但保守已得之地還是做得到的。”
龐統這才點了點頭，當即收拾行裝，令魏延保護著，一起返回荊州去了。