杨广的车驾随从高达二十多万，男男女女，各色身份皆有。行军起来，队伍拉得长达数十里，往往前军到了一个城池，后军才刚出发。而众人自是把戍卫的重心放在了杨广的身上，因此一些边边角角的位置便会被众人忽视。

杨广到达河间郡，驻跸在高阳县。

车驾的最后是役夫队伍和运送的物资，因为没什么大人物，自是没有守卫在意。乱贼高士达自称北齐王室，听闻杨广车驾返回东都，便想着趁机袭杀杨广，重建北齐。但这种事也只是想想，操作起来根本不可能。

高士达始终没有找到合适的机会，便缒在天子车驾之后。

这日碰巧禁军赶着往高阳县，使得防线出现了疏漏。高士达趁机偷袭运送物资的队伍，殿后的禁军措不及防，损失惨重，连着役夫，伤亡数千人，大量御制物品和一些宫女、内侍被叛贼所掳。

高士达一击得手，便立刻撤退，根本没给隋军报复的机会。空留得到消息的杨广在六和城内大声咆哮却无济于事。

杨广怎么能吃这种亏，这几乎是打脸。

愤怒的杨广立刻下令各地官府大肆捕杀乱民，凡疑迹者一同处置，宁可杀错，绝不放过。杨广的诏令杀气腾腾，立刻使得河北的动乱变得更加剧烈。

但还不仅仅是这。

福无双至，祸不单行。之后不久，黄明远平定杨玄感叛乱，消息传到杨广的行在，杨广大喜，终于一扫多日来的忧心和郁气。然而欣喜的事情没多久，又有坏消息传来。

被俘虏的叛军大将韩世谔在被押运行在的途中竟然脱逃。

韩世谔被捕之后，便每天让看守者买些酒肉以酣畅饮宴，还扬言说道：“我死在朝夕，不醉干什么！”他又渐渐以酒来敬看守者，看守者也和他日渐亲近，成了酒友。最后韩世谔灌醉了看守，于是得以逃走投奔山贼，不知所终。

一件又一件的事情终于让杨广爆发了，不过杨广没有奋发图强，而是处死了两名进谏的御史。

此事一出，朝内外哗然。

起居舍人虞世南请杨广收回成命，被杨广训斥道：“我性不喜人谏，若位望通显而谏以求名，弥所不耐。至于卑贱之士，虽少宽假，然卒不置之地上。汝其知之！”或许是因为虞世南是虞世基的弟弟，所以才逃得一死，但也被贬出朝廷。

众人为杨广的话吓得胆寒，只要进谏，不管身份，就没有好下场。至此朝野内外，再无人敢向杨广说真话。

而虞世基、裴蕴二人，投杨广之所好，贬斥忠臣，提拔佞幸，渐渐掌握了朝堂。自此杨广不喜欢听得、见得再也看不到了。