太子建成、齐王元吉和裴寂都赞成这一策略，而萧瑀等人虽然知道不应当如此，却不敢谏阻。
唯有秦王世民挺身而出，劝谏道：“北方少数民族为祸中原的情况自古就有。陛下凭着圣明英武，创建新王朝，安定中夏，拥有百万精兵，所向无敌，怎么能因有胡人搅扰边境，便连忙迁都来躲避他们，使举国臣民感到羞辱，让后世来讥笑呢？
那霍去病不过是汉朝的一员将领，尚且决心消灭匈奴，何况儿臣还愧居藩王之位呢！希望陛下给我几年时间，请让我把绳索套在颉利的脖子上，将他逮到宫阙之下。如果到时候不成功，再迁都也为时不晚。”
李渊被李世民这一番话说动，毕竟他也不想如此狼狈逃窜。
不过李建成却跳出来说：“当年樊哙打算率领十万兵马在匈奴人中间纵横驰骋，结果还不是败了？二弟的这些话，该不会是和樊哙的相似吧！”
面对着李建成的挑衅，李世民却镇定答道：“我们与汉朝面对的情况各有区别，用兵的方法也不相同！樊哙输了，凭什么我不会胜？”
李渊听后，觉得有理，再加上李纲，孔颖达等重臣支持，便也暂歇了迁都的想法。
不过很快，李建成与众嫔妃就共同诬陷李世民说：“虽然突厥屡次在边疆上为祸，但只要他们得到财物就会撤退。秦王假托抵御突厥的名义，大肆调兵遣将，实际上是打算总揽兵权，成就他篡夺帝位的阴谋罢了！”