但與多年老友陳牧商量時，卻遭到了陳牧堅決反對。
“我陳牧雖敗于赤眉，但也知道一臣不侍二主，劉玄再平庸，也是我二人一手擁立，別人能棄，我卻不能。”
又勸道：“如今他眾叛親離，但好歹名分還在，去了荊南后，以你我麾下數千之眾，尚能打下半州地盤，讓劉玄偏安一隅，有個善終，你我亦能讓他改封吾等一郡，做一方諸侯，總好過為赤眉做看戶之犬！”
但廖湛還是遲疑，覺得金窩銀窩不如自己的狗窩，隨縣好歹是中原的邊緣，荊南就是炎熱卑濕之地了，丈夫早夭，不去也罷。
這分歧導致在隨縣時，二人分道揚鑣，廖湛雖不劫持劉玄，但還是拉著隊伍留下來看看形勢，美其名曰為更始皇帝斷后。
唯獨陳牧、朱鮪作為更始最后的忠臣，帶著寥寥三四千人與劉玄南下，翻越橫尾山后，就進入了江夏郡地界，趕上秋雨連綿，眾人都成了落湯雞，頗為狼狽，劉玄只能安慰自己：
“總比當初王莽南狩要強些。”
江夏理論上亦是綠漢地盤，劉玄早早派人通知沿途，然而在抵達安陸縣，疲憊的眾人希望今晚能睡在屋檐下時，卻見壕邊密布鹿角，城上遍插旌旗，卻不是漢，而是……
“楚？”
等逼近城池叫門，安陸縣的回應，竟是叱軍士亂箭射下！那黑臉的縣令更在城頭，數落起綠林的罪孽來。
“新莽之時，綠林軍朱鮪等過吾縣，屠戮甚眾！安陸人恨不能生食汝肉，只忍辱負重，臣服于更始。如今蒼天有眼，令南陽遭赤眉之災，更始覆滅，而楚黎王起兵于荊襄，吾等自然歸之。”
“從此以后，安陸再非漢土！只憐汝等路過，速速離去，尚可保平安，否則，掃地大將軍便要來攻了！”
劉玄頓時傻了，心中細數他稱帝短短一年半時間內，封的八個姓王，十三個異姓王，算了半天后才叫道：
“朕……朕沒冊封過叫‘楚黎王’的諸侯啊！”
……
而在新野縣，鄧氏塢堡，南陽豪強聚集在此，共商他們未來的命運前途。
新野豪強方面，有來歙，鄧晨、鄧奉叔侄，以及陰識。
數日前，正是鄧奉、來歙二人合力，帶著兩家徒附及本地民眾數千人，在新野以北重創赤眉前鋒。
鄧奉率先出言道：“赤眉號稱百萬，實為三十萬，十萬在彭城、汝南、淮北，但入南陽者亦有二十萬之眾，其中能作戰者不下十萬！”
而經過多年戰亂、失敗、排擠，新野豪強鄧、來、陰三家合力，即便募本地人加入，也湊不出一萬人了。
新野一馬平川，赤眉是難以擋住的，撤離幾乎是豪強們唯一的選擇，但撤往何處，卻成了他們爭執的問題。
但沒人愿跟劉玄走，這是唯一的共識，他們可受夠這庸主了。
鄧奉率先提議：“南郡太守秦豐，聽聞赤眉破宛，便自稱楚黎王，建都于襄陽，而其女婿，南郡都尉田豐亦愿附從于他，稱掃地大將軍，二人擁兵三萬，秦豐已向北接管鄧縣，愿協助吾等，對抗赤眉！”
他的意見是，不要走，留下來打一打！就算頂不住赤眉的攻勢，就往南退往襄陽一線，利用那里的山川之固，赤眉決難攻破。
鄧奉卻不看叔父鄧晨，他不重要，鄧奉只打算說服一個人：來歙。