張浚設都督府，辟舉胡銓任湖北倉屬，不過胡銓因為家中有事，并沒有赴任。這時有詔令到都堂審察，兵部尚書呂祉以賢良方正推薦他，趙構也再次想起此人命人來招他問對。
不過官家的詔令還沒有到，牛皋已經派人去了吉州廬陵薌城。這些人打聽到了胡銓的信息，直接到了他家家中，出示了開平府的命令，還有李光推薦信。
胡銓曾經在李光的門下求學，對于這位老師十分的敬重，加上對開平軍的一些風聞。而且他的承直郎只是六品的散官，這次又提升了以及成了從五品，而且是開平府的心腹，他合計以后還是決定同意了高寵的征辟。
開平軍的人倒也是雷厲風行，二話沒說就幫他收拾家當。胡銓還要去給自己的老師蕭楚打招呼，沒有想到這些人倒也利索，連蕭楚一起卷包會帶走了。
朝廷的使者到來，結果胡銓家中已經是人去樓空，只好空著手回去復命。趙構也沒有將這么一個小人物太過放在心上，沒有就沒有吧！轉頭就忘卻了。
很快趙鼎回來，言明高寵的事情，說他一個月之后就會來臨安。
秦檜等人以此來攻擊趙鼎，說他上了高寵的當。趙鼎就用高寵未立太子，要太保何用的論調來搪塞。
這一下秦檜等人雖然不說話，可是卻讓趙構十分的不高興。君臣之間產生了嫌隙。誰都知道趙構只有一個兒子在3歲的時候就夭折了，5個女兒也都被擄去了金國。現在只是收養了兩個兒子。
趙構現在很是不甘心，也一直沒有立太子，還不是想趁著還有能力自己再生一個。這個趙鼎豈不是正戳在官家的心頭上。
趙鼎一直駁斥議和，與秦檜意見不合，現在趙鼎又在此事拂逆高宗，秦檜乘機排擠趙鼎，推薦蕭振任侍御史。蕭振本是趙鼎薦引的，進入臺閣后，彈劾趙鼎的搭檔參知政事劉大中使其免職。
趙鼎對于老朋友的去職十分傷心，見人就說說：“蕭振的本意不在劉大中。是我害了他啊！”
蕭振也對人說：“既然知道，趙丞相就應該不待指責，就會自行去位。”
正好殿中侍御史張戒指責給事中勾濤，勾濤說：“張戒攻擊我，是趙鼎的意思。”便詆毀趙鼎結交臺諫官員及諸將為朋黨。
高宗聽后越是疑心，趙鼎稱病求免相，說：“劉大中持論公正，被章惇、蔡京之黨所嫉恨。臣的意見與劉大中相同，劉大中去職，臣怎能留任？”
趙構也借坡下驢，便以趙鼎為忠武軍節度使出知紹興府，不久加檢校少傅，改任奉**節度使，離開了中樞。
秦檜知道后率領執政大臣前去送行，趙鼎對他不禮遇，一揖而去，秦檜越是恨他，想要除之而后快。