“軍中倉促，比不得常山城，還請叔父將就一番，叔父合適想好去處，我即可派人護送。”天色甚晚，松鶴丸已經沉沉睡去，便是連上了年紀的兒島直光也是精神不振，宇喜多直家命人去收拾帳幕，再燒些熱水，供這主從二人洗漱、安歇。
順便揀選了些許合適的衣物，派人送去幕帳，因為軍中沒有松鶴丸這樣孩童所穿的衣服，只好選了兩件沙彌短衣一并送去。
次日一早，兒玉黨全軍開拔退往山中，準備修筑營壘，居高臨下，來防備莊為資的圍剿軍勢。
山中有座廢棄多年的城砦，與山名相同，名喚作龜山城。
這龜山城本也是上野氏的居城，后來伴隨著上野氏的日漸衰敗，宗家流亡豐后國，庶流退居兒島半島割地自守，再無進取之心，這座面積不大的山城也隨之遭到荒廢。
龜山城雖然荒廢多年壁，久乏修繕，但整體形貌尚在。城內原本聚居幾十戶倭寇眾，不過聽聞兒玉黨將至的消息，哪里還敢久留，早早就乘船逃亡。
這座廢棄山城過去也曾是兒玉黨來備中國剽掠時，暗中潛藏休憩的賊巢。因此得知莊氏打算對自家展開圍攻，宇喜多直家第一時間想到的，就是退入龜山，憑借地勢來據守退敵。
過往上野高秀也曾進言，勸誡家督重筑龜山城，派兵駐守要沖，以作為防備倭寇和莊氏的關隘，興建港浦，待發展起城下町后也可為上野家增長賦稅，然后反過來積蓄民力，撫養百姓。
可上野家早已經不是當年的南備中守護代，幕府相伴眾。
兒島郡民力薄弱，難以勞師動眾的進行跨海筑城，因此筑城工作時斷時續，再加上莊氏的阻撓，兒島郡內豪族對于譜請勞役的推諉抗爭，不愿看到上野家勢力增長，最后重筑龜山城之事，也只得作罷。
龜山城從此就成了倭寇、山伏聚集的一處我單，只得暫且作罷，最終便宜了倉惶退兵的兒玉黨。
明石景季等軍中諸將，攀山而上，他們不以山道艱險難走，反而驚奇於這座林木掩映下的城砦。
龜山城雖然年久失修，雜草叢生，墻垣也多殘破，但觀其大貌，仍能遙想昔日險要堅固，以此地為依靠的話，就算莊氏大軍齊至城下，尤可為憑。
宇喜多直家催馬揚鞭，當先一騎自半坍塌的大手門出馳入，抬頭一望，見旁側的箭櫓上插著一面破舊大纛，時有風雨，幡旗飄揚，只見上面歪歪扭扭的寫著“八幡大明神”幾個大字。
龜山城開山而建，主城舊址臨近泉溪，地方平坦，雖然館舍多已坍塌，但城中卻有大片的空余地方，非常適合扎營。
城外掘壕，挖馬陷坑，豎木柵，立拒馬，填補墻垣缺口；另擇精銳弓手登臨箭櫓戒備，臨時捆好兩排滾木樁，自城頭落下，權做臨時的墻垣，填補缺口。
晚上哨探報傳，并未發現敵蹤，宇喜多直家會見諸人，軍議商討。除去少數幾人支持繼續勞作外，多數人都認為當先留在山中休整，安撫住浮躁的軍心。
宇喜多直家抬首觀望天色，見得烏云濃重，猜度興許這兩日大雨恐難停歇，因此采取了個折中的方法。
一聲下令，全軍上下不得休息，青壯冒雨在城外砍伐林木，抓緊時間在山道各處要沖，設立關防；老弱婦孺全體，搭設營帳，生火做炊，抓緊時間趕制兵糧丸、手抄米、煮芋頭等物。
整個一揆眾分成三陣，雜兵環繞在外，羸弱居中，精銳旗本隊扈衛本陣。在各隊營帳規劃的范圍之間，空出兩間寬的行軍兵道，輜重錢糧皆囤積城中尚還算完整的本丸大殿內，指派專人看守，嚴防偷竊、火盜諸事。