面对突厥人的包围，隋军上下惊惧恐怖。宇文述此时为武将之首，负责指挥诸军。他下令拆毁民房，用作守卫城池的材料，导致突厥人还未发起攻击，人心已乱。

而且最重要的问题是，整个雁门城突然涌入大批的人畜，使得本就不大的城池变得异常狭窄，各种储备物资也不足。此时整个雁门城中有军、民十五万人，粮食仅够供应二十天。

从在长城之外发现突厥人，杨广准备率军返回，他便第一时间想到了黄明远，并派人五百里加急赶往辽东，征调黄明远前来代北救驾。但从代北到辽东，一来一回四千里地，根本是远水解不了近渴。

杨广进关之前，也只是通知朔州总管王仁恭和代州总管范安贵二人接应，却并未来得及往太原派遣援兵。

此时王仁恭兵败返回善阳，而范安贵则和杨广一同被围困在雁门城中。整个大隋朝廷失去了与外界的联系。

突厥人来的很快，始毕可汗听闻阿史那思摩将大隋天子杨广包围在雁门城，立刻驱兵数万赶来。他又联络同罗部，让同罗斜也从雁门东北面方向进击，双方一左一右，在雁门城下会师。

此时北地武备废弛的坏处体现出来了，整个总管府不过是一万多人，各城不过是几十到几百人，因此整个马邑、雁门二郡四十多处关卡、城池，尽为胡人所破。只有雁门、崞县、善阳等几处要地控制在隋军手中。

六月十五日，始毕可汗终于从北面赶来，率领主力部队到达城下。十多万军队将整个雁门城围的水泄不通。站在城头往外瞭望，尽是人山人海。

从十二日到十五日，整整三日的时间，阿史那思摩手中不过只有万余骑兵，实力并不强。而在这三日，隋军为阿史那思摩伪装的大股主力所惊吓住，不敢轻易突围，最终丧失了绝佳的突围时机。

等到突厥主力赶到，将雁门围的严丝合缝，城中的隋军根本没有一丁点突围的机会了。

始毕可汗到达城外，望着城头上惊慌失措的隋军。十多年了，他终于将隋军踩着脚下，这种感觉，别提多舒服。

杨广虽然被包围，但城中尚有数万军队。始毕可汗担心夜长梦多，便下令军队当日便进行攻城。

突厥骑兵没有足够的攻城武器，但是他们却有攻城的妙法。

大队的突厥骑兵冲杀到城门前，然后向城头抛射羽箭。胡虏擅长骑射，大批的箭矢射入城中，整个城头箭如雨下。

杨广本来带着侍卫来到城头，希望可以鼓舞士气。

不过他虽然也曾领兵南灭陈国，北破突厥，但都是名义上的主帅，并不需要他操太多心。而且这几年杨广沉浸于酒色之中，当初的英雄气概早就被酒色掏去了。

杨广带着人靠近城墙，而城下弓矢密不透风。

此时突厥人的羽箭射到杨广的面前，吓了杨广一跳。若非亲卫护住杨广，杨广几乎要被射死。

自此之后，杨广再不敢登上城头。

面对这困守孤城的局面，杨广脆弱的心理防线几乎崩溃，他只得抱着小儿子赵王杨杲哭泣，眼睛都哭肿了。