張居正斟酌了一下詞句，才小心的說道：“老師不知道外間怎么說嗎？”
徐階說道：“外間之說，老夫從不在意，他們若是說些什么，老夫就動搖，怎么能成事？”
看著張居正焦急的神情，徐階不由得想到自己當年，嘉靖九年（1530年），在討論文廟祀典時，內閣首輔張璁主張文廟中將孔子像改為木制神主、將“大成至圣文宣王”封號改為先賢先儒等。嘉靖將其疏下發群臣討論，徐階讀后頗為不滿，于十月二十九日上疏力陳孔子之號不必去者三，不可去者五，反對張璁之說，主張沿用舊制。十一月一日上朝，張璁召徐階于朝房斥責，徐階乃正色力辯。
據說當時嘉靖還親筆寫下徐階小人，永不敘用，將徐階貶到福建南平府做推官。后來徐階還是依靠自己的政績和朝中大員的提攜，一步步從吏部右侍郎、吏部左侍郎、翰林院掌院學士、禮部尚書而入閣。
一路上徐階遭受了多少白眼和旁人的風言風語，光是嘉靖多次對徐階表達的不信任，就足以終結徐階的仕途了。
嘉靖二十八年（1549年）二月，徐階被擢為禮部尚書，仍兼掌翰林院。徐階剛上任，就趕上太子朱載壡行冠禮及夭折。四月，徐階請求建儲，世宗對此不滿，將其疏留中不發。九月，吏部尚書之職空缺，廷推徐階出任，遭到世宗呵斥。
要是旁人，被皇帝這樣明確表達不信任，恐怕早就心灰意冷，辭官歸故里了。但是徐階并沒有放棄，憑借自己辦事勤快，而且徐階所撰青詞（齋詞）讓嘉靖滿意，不僅成功在禮部尚書任上入閣，甚至重新贏得嘉靖的信任，命徐階入直西苑無逸殿，賜飯食及飛魚服，侍奉自己左右。
徐階這才在內閣站穩腳跟，并且將仇鸞治罪，這樣的人，用心如鐵石來形容并不為過。
這次楊繼盛下獄，徐階不但沒有盡力救援，反而閉門謝客，連自己的門生都不見，京師的輿論都認為他太過于冷血了，連自己的門生都不營救，按理說官場上最親密的關系就是師生和同科了，而且大家都認為，楊繼盛坐著兵部武選司員外郎的肥差，甘冒奇險去彈劾嚴嵩，必定是徐階的授意。
而今楊繼盛因為彈劾嚴嵩下獄，你徐階不發一言，讓大家都覺得徐階過于冷血了，看著張居正焦急的神色，徐階溫言說道：“叔大可是覺得，老夫過于冷血了？”
張居正說道：“學生知道老師所為，必有深意，只是他人未必能理解老師的苦心。流言四起，三人成虎，于老師聲名有礙，終歸不是什么好事，學生一是不忍仲芳遭此大難，二是不愿老師被人非議。”
徐階哈哈笑道：“叔大在翰苑，倒是學得圓滑了，莫不是子實（李春芳字）教你的。”
張居正有些尷尬的說道：“子實謙謙君子，溫潤如玉，倒是令人敬佩。”
徐階笑笑，不再言語，師徒二人就這么坐著，張居正有些看不懂自己老師了，正當張居正準備開口詢問自己的老師時，管家進來說道：“老爺，人從后門來了。”