经过半个月的赶路，进入初秋时节，隋炀帝带着大军来到了雁门郡，这里处于群山环抱之中，地势险峻，山峦起伏，群峰参差，道路蜿蜒，没有一马平川的笔直康庄大路。
雁门郡城高踞其间，依山傍险，城墙高厚，正墙上还有女墙，女墙上再砌砖垛，砖垛间的垛口是守城将士的了望孔与射击口，城墙上还建有雄伟的城楼、角楼、望楼，相隔一段距离而立。
楼顶的建筑，是典型的古代重檐九脊歇山式，外有廊柱围绕，下临马道，由于雁门郡处于边戍重地，所以城池修建得格外雄壮。
这里算是一个郡的治所，郡守、通守、地方官员治理民政的主城。
杨广所带十六七万的军队，分成前、后、左、中、右五路大军，由杨暕带领后军，驻扎了崞县，前军由吐万绪带领，驻扎在雁门关，中军三万人进入汾阳城，左右两军各两万五千人，驻扎在城外，分别有来护儿、裴仁基统领。
古语说：天下九塞，雁门为首，得雁门而得天下，失雁门而失中原。
这雁门关在北依雁北高原，南屏忻定盆地，就在山体背脊上，有连绵的长城，外壮大同之藩卫，内固太原之锁钥，根抵三关，咽喉全晋，乃军事要塞相当重要。
雁门郡守吕谦和，雁门关屯卫将军云定兴，听说陛下亲临北巡，惊讶万分，带着文谋武将，叩拜圣上驾临，尽地主臣子之宜。
杨广看到雄关大川，心中伐辽东的郁闷之气，终于散开了不少，一时兴起，还亲自登上了雁门关。
雄关由关城、瓮城和围城三部分组成。关城城墙高十米，周长约二里，墙体以石座为底，内填夯土，外包砖身，墙垣上筑有垛口。雁门关有东、西二门，皆以巨砖叠砌，过雁穿云，气度轩昂，门额分别雕嵌“天险地利”二匾。
站在雄关之上，举目眺望，能够看到关外的草原，碧蓝的天空，那是突厥游牧的地盘。
当初东西两突厥分裂，东部突厥启民可汗归附了隋朝，隋文帝特许将河套平原和马邑外围的草原，割给突厥人放马、徙居，随时受到朝廷庇护，免得被西突厥攻打。
但是十多年下来，东部突厥经过休养生息，繁衍人口，马匹、铁骑、甲胄、粮食等越来越充裕，大业五年启民可汗死后，始毕可汗立，他对大隋没有像他父亲那样恭敬友好，外交家裴矩曾经用计，打算离间始毕可汗与王弟叱吉设，却没有成功，使得始毕可汗怀恨在心，对大隋开始离心离德。
三年前，裴矩还使计诱杀了势必何况得力宠臣史蜀悉，使得突厥对大隋臣服之心减弱，始毕可汗从此不再入中原拜见杨广了。
此次杨广要北巡，就是打算召集草原的突厥、铁勒、回纥、薛延陀诸部的王汗或酋长，前来朝拜他的驾临。