趙家是大戶人家，哪怕歷經邯鄲之戰的饑荒，趙家應該也不缺錢，小時候躲在趙家大院的趙政倒也不愁吃不愁穿，最關鍵的是，他有書讀。
戰國時代乃至于后世一千多年的封建社會，讀書也不是一般窮苦老百姓干的事，因為書在古代是奢侈品，并不是每個人都能買得起的。戰國的書都寫在竹簡和木片上，耗時費力，全是人工謄寫，也就是家里有錢的大戶人家能買得起書讀。這種情況差不多一直延續到宋代，宋代發明了活字印刷術，印在紙張上的書籍造價便宜，而且能批量生產，這才為寒門子弟讀書創造了條件，讀書的人多了，做官的人自然也就多了。
幼小的趙政從母親那兒聽到最多的話就是外面有很多人要殺他讓他老老實實呆在家里哪兒都不能去，這讓趙政從小就產生了一種感覺，他所處的這個世界是險惡的，人人都想殺他，人人也都能殺他，而弱小的他卻什么也做不了。
童年的趙政無數次看著趙家緊閉的大門，一顆堅強種子在趙政的心里默默的發芽，艱難的童年歲月潛移默化影響著趙政，這段童年記憶也在讓趙政深深的明白，他必須強大，必須強大到某種地步，這個世界上的惡人才不敢欺負他和母親。
窮人的孩子早當家，這個道理，也適用于小趙政。
同樣的，擁有灰暗童年的趙政也比別人更早的知道生存的艱難和強大的重要，他的苦難童年將深深的影響著這位千古一帝的一生。
但趙政的童年也并不完全是封閉黑暗的，事實上，幼小的趙政有一個朋友，這個名字的朋友叫姬丹（也就是后來派荊軻差點刺死秦始皇的太子丹）。
姬丹也是‘質子’，年紀與趙政相仿。只不過他是燕國派遣在趙國的人質，也是燕國的太子。
燕國是戰國七雄里的小國，燕國太子自然而然也就是小太子，再加上燕國和趙國挨著，兩國在戰國時代沒少打仗，基本上也都是趙國蹂躪燕國，所以姬丹這位燕國太子在趙國的處境也并不比趙政好哪兒去。
趙政，姬丹，一個秦國王孫，一個燕國太子，同時流落在異國他鄉，同時又年紀相仿，差不多的境遇讓兩人很自然的成為了朋友，倆小孩一起飲著趙國的水，一起在逆境中長大，一起憧憬著未來。
然而，趙政在平靜和孤獨中慢慢長大，他的童年似乎沒有太大的改變，可這時候整個天下卻在發生著翻天覆地的變化。
這個變化，主要在于秦國。
至于燕國，天下大勢和這位北方又老又弱的王國沒什么太大的關系。
秦昭襄王五十一年（公元前256），趙政三歲。
這一年，周王朝的最后一個周王姬赧去世，秦將摎攻周，占領西周君三十六城，人口三萬，綿延了八百年周朝正式滅亡。同在這一年，遠在楚國北部一個叫沛縣的小地方，一個男嬰出生在一戶普通農民家庭，這是劉家第四個兒子，按照排名取名叫季（古代按照伯仲叔季排，季排名第四，劉季，也就是劉四），后來這個叫劉季的小孩兒長大了個改了個名字，這個名字我們很熟悉，叫劉邦。
秦昭襄王五十二年（公元前255年），趙政四歲。這一年，王稽（范雎的恩人，帶著范雎逃去秦國的人，范雎知恩圖報，舉薦忘王稽做了秦國河東郡郡守）犯法，背著秦國吃里扒外和諸侯私通，按照秦罰應該判處棄世（在鬧市斬首）的刑罰，同時，秦律規定，舉薦者和犯法者同罪，秦昭襄王王雖赦免了范雎，但范雎畏懼，稱病讓出丞相位置，之后就再也沒了聲息。
秦昭襄王五十三年（公元前254年），趙政五歲。這一年，韓王親自去咸陽朝請，韓國徹底依附秦國，魏國戰戰兢兢聽令于秦國，其余各國仰仗秦國鼻息。
秦昭襄王五十四年（公元前253年），趙政六歲。這一年，七十多歲的秦昭王去秦國舊都城雍城（今陜西鳳翔縣）南郊祭祀天地。在古代，只有天子才有資格祭祀天帝，年邁的秦昭王已然以天子自居，而天子又是天下的統治者，這就顯示了秦國的志向是吞并整個天下而統一。