南宋建立后，有人曾在臨安市場上出賣一只水晶制作的柱子，為皇室購得，宋高宗見到注子不禁流淚，說此是先帝哲廟陵寢上物。紹興年間，岳飛部北伐收復宋陵，曾對宋陵進行修茸。但不久，岳軍南撤，宋陵又淪入金軍之手。
隨后占據中原的女真人將宋陵建筑徹底毀壞，珍寶被盜掘一空。秘書少監鄭剛中出使途中繞道至宋陵巡看，在筆記中記述各陵上的建筑物已“顛毀大半”，有的則已被兵火焚盡，只剩下“林木枯丘”。
十余年后，南宋太常寺少卿方庭碩，出使金朝時到宋陵察看，發現各陵均被掘開，宋哲宗的尸骨露擲在永泰陵外，就脫下袍服，將哲宗尸骨包裹起來，重新置放陵中。
入元后宋陵再次遭劫，陵區已經“盡犁為墟”。為了徹底熄滅宋人心中的念想，元朝僧人楊璉真迦以極端的方式毀壞了南宋皇帝的陵寢，北宋的皇家陵園也被一把大火燒盡，北宋皇陵的地面建筑蕩然無存。再后來，趙昺前世就知道宋朝皇陵被毀嚴重，早就成了荒冢丘土，以致現代盜墓賊都懶得去光顧，考古學家也認為失去了考古價值不愿理會。
大家都知道自家祖墳被人刨了，那可是不共戴天之仇，自高宗趙構皇帝以下皆被視為奇恥大辱，但他們能做的也只能是淚流不止，徒嘆奈何。而南渡之后，也只曾借宋金和議及使臣出使之計拜祭，歷代皇帝都未能親往鞏義皇陵祭拜祖宗。
趙昺也覺得自己倒霉，來到這個世界竟做給祖宗們擦屁股的事情了，為了保護紹興皇陵他出兵江南，好歹保住了臉面，沒有被楊璉真迦給挖了個底兒朝天。現在那邊剛整治的安穩了，又要為老祖宗們的陵墓操心，給他們重整安眠之地。
重修皇陵之事事關皇家聲譽，也關系到國家的臉面，無論從哪個角度都需要盡快加以修繕，趙昺亦要前去親祭。但那邊戰事尚未結束，且他的行蹤還在保密中，現下他只能讓江璆攜禮部和工部官員先行前往勘察損毀情況，并加以初步修繕。
如果修繕祖陵還算是趙昺的家事，那么另一件事就是事關天下的大事了。在東線攻占山東之中，已經收復了曲阜。而大家都知道曲阜乃是孔圣人的家鄉，也是孔氏祖廟所在地，且孔門是中華民族兩千多年傳承下來，沒有中斷的一個家族。
這個家族繁榮到什么程度呢不管哪個朝代他們家都備受推崇，不管哪個民族統治中華大地，他們家都能夠成為文化道德的榜樣。而衍圣公，正是歷朝歷代朝廷給老孔家官方冊封的一個職位，是孔子嫡長子孫的世襲封號。
不提它朝，從宋朝開始，宋仁宗就將孔子的嫡長子孫冊封為衍圣公，相當于就是給孔圣人繁衍后代的代表人物。而到了南渡之后，這個問題變得復雜了。
徽宗時期，孔子的第四十七代嫡長孫孔端友襲封為衍圣公。可惜不久就出現了亂世的局面，金兵大舉南下，孔端友為了保住孔家的傳承寶物，所以攜帶著南下，投奔在臨安建立南宋的高宗趙構。