十一月二十八日，忽必烈最终决定撤军。然而他并没有径直率军北返，而是留大将拔都儿率一部继续囤扎于鄂州城下，自己亲率主力东进，号称要直驱临安。
可“东进大军”磨磨蹭蹭，三天才走了二十里，闰十一月初一，才到达青山矶渡口。忽必烈率少量亲卫先期渡江北上，命留守的谋士张文谦于次日告谕诸将，六天后大军全体撤围鄂州，除留一部继续据守青山矶一线，接应尚在荆湖南路腹地的兀良哈台北返，其余大部陆续渡江北归。
轰轰烈烈的蒙古三路攻宋大战，至此基本宣告结束。
对于忽必烈来说，轰轰烈烈的夺位之争正式拉开了序幕。
而对于鄂州城中的贾旭来说，过去一个多月的学习时间，也算告一段落。
贾似道家世显赫，长期处于社会顶层，虽然现时身为军事统帅，但是习惯将军中杂务交予手下，自己只负责制定目标、验收成果。吕文德则与此不同，他出身平民，起于微末，从军之前是个樵夫。他是在数不尽的血腥厮杀中，从最基层一路向上摸爬滚打，最后官至显宦的。
大宋军伍从作战到指挥的各个层级，他全都干过。那些佐官、小吏，欺瞒贾似道容易，想骗他是绝不可能。
所以吕文德做事，往往简单明了，直击要害，效率很高。同时他又凡事身先士卒、以身作则，与普通军士之间相交也是平易近人，故而在军中威望很高。
当然，同样是因为出身平民，孑然一身，毫无依仗，所以他十分注重与各级官员搞好关系，尤其是朝中重臣，故而在道学清流口中难免落得个媚上的评语。
同时他多在军中任用兄弟子侄、培植党羽，甚至家乡旧识的樵夫、炭农，也纷纷授为武官，引为亲信，世人称之“吕家军”，私下里却轻蔑的唤作“黑炭团”。但是古往今来的封建军头儿们，有哪个不是如此呢？这个时代的军队就是靠着血缘、乡谊之类的纽带组合在一起的。
贾似道将贾旭托付给他，他自然是十分重视，生怕贾旭有什么闪失，于是让贾旭整日跟在自己身旁，毕竟战场上最安全的地方就是主帅身边。所以虽然城外的蒙古军队又围着鄂州城继续狂攻了月余，大将张胜甚至战死在了城头上，贾旭却始终安然无恙，再未受伤分毫。
而贾旭看着吕文德每日如何巡视诸营、布置防务、调配物资、维护战械、安排将领、议功肃法，甚至亲自过问饮食、疗伤、丧葬等事。