过了很多议和的机会。
后来，唐恪看出来了，李存并不是真心跟赵宋王朝议和，所以，唐恪多次提醒赵桓，李存秋冬肯定会再来伐宋，然后密奏赵桓早作准备，甚至力劝赵桓早日离开东京汴梁城前往长安避敌锋芒，然后召集天下之兵，以空间换时间，慢慢跟大乾王朝打国战。
唐恪对赵桓说：“唐自天宝而后，屡失而复兴者，以天子在外，可以号召四方也。”
唐恪甚至考虑到了，东京汴梁城中的将士，可能因为家属在京畿地区，不愿意离开故土跟赵桓去陕西。
所以，唐恪又向赵桓建议，赶紧召集当时的四道总管赵野、张叔夜、王襄、胡直孺前来勤王，然后让四道总管护卫赵桓前往长安。
赵桓刚开始时觉得唐恪的建议非常有道理，想要按照唐恪所说的，像当初的赵佶一样，逃去长安避难。
可赵桓又优柔寡断，在何栗前来见他时，忍不住将唐恪密奏给他的建议说给何栗听，让何栗帮他来拿主意。
何栗是主战派，一听唐恪劝赵桓逃跑，立即就坚决反对道：“周室东迁亦不如唐恪害国，此乃不肖子贱卖父祖家业，为人所不齿也。”
赵桓身边的一众内侍家眷全都在东京汴梁城，他们就像唐恪所预料的那样，不愿意跟赵桓去长安，所以他们也劝赵桓不要逃去长安。
见这么多人反对他逃出东京汴梁城，赵桓立即就又变卦了，还在唐恪催促他赶快行动时，跺着脚说：“朕当死守社稷矣！”
唐恪见此，只能长长一叹，然后再也不提这茬了。
如今，虽然乾军已经兵临城下，但赵桓君臣竟然还没有忘记内斗和内耗。
侍御史胡舜陟，听说赵桓冲唐恪发怒了，趁机弹劾唐恪与聂昌，说唐恪和聂昌智虑短浅，不能经画边事，又说朝廷继续用唐恪与聂昌这二奸当宰相，就不能打退大乾王朝的入侵。
东京汴梁城中的不少民众也认为唐恪无能，叫乾军又打到了东京汴梁城，甚至想要找机会揍唐恪。
当天晚上，唐恪乘轿外出办事，被不少民众给拦住，民众用石头砸唐恪的轿子，甚至连他家小厮手上的灯笼都给砸破了。
唐恪当机立断，弃轿骑马，才在护卫的保护下，逃得一命。
回家后，唐恪在书房里坐了一宿，然后给赵桓上奏章，请求致使。
赵桓一看唐恪已经失去了人心，觉得唐恪不再适合当宰相了，就免去了唐恪少宰的职务，让唐恪改任观文殿大学士、中太一宫使兼侍读。
就这样，在乾军已经兵临城下之时，赵宋王朝没了宰相。
赵桓也觉得，现在形势这么危急，赵宋王朝连个宰相都没有，好像不太好。
赵桓又矬子里选将军，任命何栗为门下侍郞，暂时处理宰相该处理的政务。
就这样，在两国即将决战之际，赵桓来了个临阵换