眼见即将进入九月，而一旦进入九月，可谓是深秋了。而高句丽的深秋之后马上就要迎来大雪纷飞的寒冬。寒冬时节，后勤补给就成为非常麻烦的事情，故而对于远征高丽而言，每年只有几个月的时间，过去这段黄金时间之后，如若还没有达成目标，那么必须放弃，否则继续攻击，即使敌人不把自己击垮，此地恶劣的天气便是最好的敌人，君不见当年前隋一战未死多少人，反而是因为隋炀帝的一意孤行，导致大军冻死冻伤无数。
而此时大军始终进攻无果，安市城就像是一个乌龟壳一般，任凭大唐军如何敲打也无济于事，无奈之下，鉴于辽东一带早寒，草木干枯水结冰，士兵马匹都不宜久留，而且粮食快要用光了，癸未日（十八日），李世民敕令班师还朝。
首先让辽东、盖牟二城的百姓举家渡过辽水，随即在安市城下显耀兵力而后凯旋，城中高句丽人都藏身不出。
得知大唐军终于撤退，安市城的城主登上城楼答礼为唐军送行，李世民称赞他能够坚守城池，赐给城主绸段一百匹，用来鼓励他事奉高丽国王。
为了防止高句丽人趁势前来袭扰，李世民留下四万大军殿后，而楚墨风则是命令薛仁贵率领修罗铁骑在殿后大军的侧翼掠阵，以防备对方绕背袭击。
乙酉日（二十日），大唐军移师至辽东城。丙戌日（二十一月），本部尽数渡过辽水，谁知时值深秋，辽泽一带道路泥泞，车马难以通行，李世民遂命长孙无忌率领一万人割草填道，水深的地方用车做桥梁，而李世民则是亲自将薪木等拴在马鞍后帮助铺路。
冬季，十月，丙申朔（初一），李世民本部到达蒲沟停下，为了加快行程遂督促填道铺路的各路军渡过渤错水，不料却赶上天降暴风雪，士兵们衣湿多被冻死，心中悲痛不已的李世民敕令在道上点上火堆，以供行进的士兵烤火取暖。
马车缓缓地前行，李世民的车驾上，大唐皇帝李世民与贤王楚墨风并排而坐，望着车窗外时不时飘落的雪花，李世民不免叹了口气，此次征伐高句丽，先后攻克玄菟、横山、盖牟、磨米、白岩、辽东、卑沙、麦谷、银山、后黄十座城，迁徙辽、盖、岩三州户口加入唐朝户籍共七万人。新城、建安、驻骅三次较大的战役，杀死高丽兵四万多人，唐朝将士死近二千人，战马损失十分七八。对于一生征战无往不利的李世民来说，这样的战果是十分不满意的，念及于此李世民亲自为楚墨风斟了一杯茶水，而后忿忿地说到：“朕觉得这一次有些仓促了，如若魏征在的话，不