看不惯蒙古兵肆意欺压汉人，与蒙古士兵、将领多次发生冲突。而张柔既然身投蒙古，又怎么敢得罪主子？便要将他交给蒙古将领以军法治罪，却不想被他提前得知，逃了出来。
走投无路的张世杰最终只能南下投宋，一直跑到宋州（今河南商丘），隐姓埋名，在淮军中做了好几年默默无闻的小兵，直到被将领阮思聪发觉，试其为奇才，推荐给了吕文德，被吕文德征召为小校。
在之后跟随吕文德东征西讨的过程中，张世杰作战勇猛、屡立战功，增援鄂州之战也表现出色，还被吕文德委以率亲卫保护贾似道移司的重任。在移司途中的騣草坪遭遇蒙古南路兀良哈台部一支北上押送俘获的偏师，率军将敌奋力杀败，不仅护得贾似道周全，还抢回了不少俘获。
此次贾似道将如此猛将脱了兵籍，编为家丁，充为贾旭的亲卫指挥，足以见得他对贾旭的重视。但是从张世杰的角度来说，在军中屡立战功，吕、贾两任上官对其赞赏有加，在战后大议功中谋个军使、知州当当也是不难，如今却做了个没有正式编制的区区百人亲卫队的指挥，却不知服也不服？
可这种天大的馅饼砸在了贾旭的手里，不管他服不服，都不能叫他跑了。
于是一路上贾旭不断与张世杰攀谈，除了对他属实很感兴趣之外，刻意的笼络也是应有之义。
而事实上，贾旭的担心纯粹是想多了。张世杰为人正直、有胆色、作战勇猛，“然其人无远志”（历史上文天祥对他的评语），功利心其实也并没有很强，否则就随着自己的叔父张柔在北方作威作福就好了，何必因为看不惯汉人百姓被欺压而得罪蒙古将领，害的自己抛家舍业亡命天涯？
更何况，因为自己的南逃汉人身份，以及同族中人俱在蒙古军地历任要职，叔父张柔更是蒙古南侵的主力汉军主要统领，说他的身世不被大宋之人所忌惮是不可能的。随军做个将校也就罢了，只要主帅信任，也没什么问题。真要在一方主军政，又怎会不引人猜忌？
张世杰深知自己若是在朝中没有铁杆靠山，以他尴尬的身份，官是做不长久的。纵使一时机缘，位列显赫，待到风头变了，拿下自己只需皇帝案前一封札子、宰辅大臣口中一句猜忌甚至市井间无凭无据的流言。到时候捧的越高，摔的越疼，直到粉身碎骨。
如今贾似道让他辅佐自己的独子，虽然暂时官位不显，却是对他十分信任和器重的体现，只要将贾似道的这份信任维系住了，待到用人之时，又何愁没有合意的官职？
更何
…。。