常年轻的，心中一直记着此事所以后来瓦岗虽在李密手下越做越强，但徐世绩和单雄信二人却一直暗怀私心
所以在李密与王世充的大决战中，单雄信故意引兵观望，坐看李密崩溃坐镇于黄河北岸的徐世绩，守着黎阳仓，兵强马壮的徐世绩更是在李密败后按兵不动
最后李密降唐后，徐世绩更是用一招就借刀杀人，逼着李唐把李密给杀了当时李唐来招李密，李密坐拥瓦岗大半地盘和十数万人马，却不肯降，而是说他只听主公李密的
然后李密奉朝廷命令给徐世绩去信，徐世绩立马就降了，他整理兵册名籍府库等让郭孝恪到长安献降，却不献给朝廷，而是给了李密，说这些应当交给李密
这一手让李渊立马就对李密动了杀心，果然不久后李渊先假意让李密去山东徐世绩那里统领旧部，待他一出京，又马上招他回来如此反复，李密也明白李渊不信任他，于是不肯回去，然后马上就被唐军拦截杀死
徐世绩这手玩的非常漂亮，既报了当年李密夺瓦岗杀翟让砍他一刀之仇，又给自己立了一个忠义的形像，同时也让长安李唐明白，他徐世绩对瓦岗旧部的影响力控制力
所以李渊在李密投降时，只肯给个九卿虚衔，但徐世绩归附后，李渊却要给他父子一起封王
李唐是把徐世绩跟江淮杜伏威、幽州罗艺、北平高开道等这些人对等看待的，都是实力派的军阀，所以愿意大方的赐李姓，封王爵
不过徐世绩也毕竟不再是当年初上瓦岗时的年轻人，多年江湖也已久经历练，所以他再三拒绝了封王
最后父子俱受封国公而已
之后改名李世绩的他统领旧部，接受朝廷派来的李神通的领导，继续在山东与河北刘黑闼、河南王世充、山东徐圆朗等交战
说来也奇怪，在瓦岗时代，曾经威镇黄河两岸的李世绩，自归唐之后，却再也没有什么拿出手的战绩了，甚至可以用屡战屡败，再战再败来形容
甚至还一度被打的被俘虏，连老爹和大唐的公主都被河北俘虏了
可就算如此，在平定窦建德王世充后，王师凯旋，李渊依然安排李世绩和李世民披金甲，同乘战车进入长安城
之后李绩镇守并州，从武德年间一直镇守到贞观，一呆就是小二十年
李绩久镇并州，不少人都认为主要还是因为他被皇帝猜忌被李渊猜忌的原因在于，李绩一直是瓦岗派的山头，唐朝的许多功勋大将，都是瓦岗出来的李绩在武德朝的地位，其实一直被定性为罗艺、杜伏威这样的
朝廷其实对他是一直很猜忌的，在统一战争的时候，李渊是很大方豪爽的，只要肯归附，封王赐姓都毫不犹豫可只要平定了天下后，对这些实力派军阀，就欲除之而后快了
如杜伏威便是入朝后被杀的
罗艺在武德末