而宰相陈拒谏之说；陛下有眷待台臣之意，而宰相挟挫沮言官之威。”无论众人如何劝诫，赵鼎只是坚卧不出，并上疏吕颐浩过失凡千言。
见朝野震动，朝中众臣皆对自己不满，其中更以言官为首，无奈之下吕颐浩只得上书自求去位。为平息朝堂之争，高宗只得命人草拟制书罢免吕颐浩。制书中写吕颐浩道：“占吏员而有亏铨法，专兵柄而几废枢庭。下吴门之诏，则虑失于先时；请浙右之行，则力违于众论。”于是罢吕颐浩为镇南军节度使、开府仪同三司、充醴泉观使。
罢免吕颐浩后，高宗又以参知政事、权枢密院事范宗尹为通议大夫、守尚书右仆射、同中书门下平章事兼御营使。复起用赵鼎为御史中丞，高宗皇帝爱其直言，随后再授其端明殿学士、签书枢密院事，至此赵鼎终于跻身宰执之列。
而最让岳飞觉得此人无比重要的原因其实还有许多，但最重要的便是赵鼎一直对自己都十分支持，自为相之后，数次对自己施以援手。书中曾记载赵鼎为江南西路安抚制置大使兼知洪州时，统帅李回和岳飞不和，而赵鼎对岳飞推心置腹，并督促漕臣曾纡搜集钱粮为岳飞军中五月之费。要知道当时岳家军势力已然极大，“月费钱十二万二千余缗，米万四千五百余斛”，这等仗义之举让岳飞十分信服。随后还有赵鼎上书请求朝廷拨款供给岳飞军马钱粮，疏乞支降现钱打造舟船等事不可胜数。
可惜这般贤相，却被秦桧所嫉，因立嗣之事进谗言使其罢相，于是秦桧独揽大权。虽然中途赵鼎曾短暂回归朝廷，但在秦桧等人的一再弹劾之下，最终一路被降职为清远军节度副使，安置于潮州。
赵鼎于潮州五年，闭门谢客，不谈时事，有人询问，也只引咎自责而已。即使如此，秦桧仍不肯放过他，密使御史中丞詹大方诬蔑其受贿，嘱令潮州知州将其迁至吉阳军（即天涯海角处）。
消息传来后，赵鼎上谢表道：“白首何归，怅余生之无几，丹心未泯，誓九死以不移。”秦桧见之说道：“此老倔强犹昔。”
而在吉阳军的日子也并不好过，虽然赵鼎潜居深处，但怎奈秦桧一直惦记着他，最终使得其门人故吏皆不敢通问，后来赵鼎也明白秦桧的用意，便遣人告诉其子赵汾曰：“桧必欲杀我。我死，汝曹无患；不尔，祸及一家矣。”而后亲书墓志铭云：“身骑箕尾归天上，气作山河壮本朝。”遗言属其子乞归葬，而后绝食而死。
《宋史》中对赵鼎评价极高：“及赵鼎为相，则南北之势成矣。两敌之相持，非有灼然可乘之衅，则
…。。