重建安北都护府后，北疆压力将会骤减，黄明远又建议从丰州、代州、朔州、太原郡等地抽调军队，组建成一支一万五千人的安北军北上。

杨广皆同意了。

安北都护府有汉家军队一万五千，再加上三四万的附从军，真要爆发大的战争，也不畏惧。

黄明远又以原安北都护斛律晟出身胡族、且能力稍逊为由，请求将斛律晟和丰州总管郑言庆对调。

杨广因为安北都护府被迫撤回丰州，对斛律晟着实不太满意，因此立刻允之。

黄明远本以为今日之事，差不多就这样，杨广突然说道：“今明远击破突厥，料想十余年内，突厥怕是真的无力再为边患了。既然如此，不若裁撤北疆诸总管府，以减少边镇开支，所结余者支援安北都护府。而安北都护府一万五千汉军也太少了，不若增加到两万五千人，如此面对有不臣之心的胡虏，也有一战之力。”

杨广早有心裁撤诸总管府，只是之前环境不适合，黄明远也希望保留诸镇，这才一直牵延到现在。

不得不说，杨广选的这个时候很合适，既高句丽已灭，始毕可汗已灭，按正常想法来说，北患已消，倒是可以裁撤诸总管府了。

看黄明远有些疑虑，杨广便说道：“朕知道明远现在作为武将代表，有些事情很为难，毕竟裁撤诸总管府，打击的是地方边镇的势力。但现在若不动手，朕便没办法对灵州等边镇动手。朕这些日子总是心神不宁，总感觉雁门的事跟西边那群人有关。”

在事关权利与皇位面前，杨广的政治嗅觉还是存在的。

杨广把话说到这种地步，黄明远还能说什么。

黄明远赶紧说道：“圣人说的是，边镇消耗巨大，是到了裁撤的时候。至于波动，肯定会有，但料想应不至于有大乱子。”

杨广便问道：“还是明远体量朕。若是其他人有明远一半的忠心，还能这么多的事？”

“明远以为是都撤呢，还是裁撤一部分呢？”

当然不能都撤，否则如何戍边。但是黄明远不能提，譬如辽东、西域等地，都不能撤，但是若说不撤，杨广怎么看。

“臣以为既然要撤，那就都撤！省得被裁撤的人有怨言。”

杨广摇摇头，说道：“我知道明远为人厚道，朕以为裁撤一部分可以，但若是全撤了，辽东、西域等地，如何管理。此皆为蛮荒之地，若非军管，只恐多有事端。”

尤其是西域，几乎迁过去的汉民，除了商人，都是军队。若不军管，根本没法解决管辖权问题。

黄明远说道：“裁撤总管府，乃必行之务，不好反复。既然圣人思虑边疆问题，未若重设都护府，统辖番境。”

杨广闻之大喜，都护府更像是一级行政单位，而不是单纯的藩镇。或许权利更重，但中央插手的机会更多。

“既设都护府，那设几处为好！”

黄明远便说道：“可在西州总管府的基础上设西域都护府；廓州总管府的基础上兼领西海、浇河、河源三郡设西海都护府；在辽州总管府的基础上设辽东都护府。”

杨广点点头，黄明远设想的很符合的意愿。