从李重九这获得答复后，高雅贤，窦线娘二人即满意的离去了，半个月后，即传来消息，窦建德在河间郡的乐寿县筑坛，自立为长乐王（注一），展露其称雄河北的决心。
与窦建德达成协议之后，李重九留下苏素，赵万三为文官，统筹上谷郡之事，而高楚，尉迟敬德等大将负责统兵练兵。至于李重九还将五百番军骑兵，改作为郡兵骑兵常备服役。李重九每年给他们同样是一匹绢的酬劳。这些番兵都是从随李重九南下的九千番骑中精选而出，全部配以铁甲皮质马具装，而且是一人三马，远胜一般的骑兵。
这五百番军骑兵就驻扎在雁门郡的灵丘县（注二），与上谷郡飞狐县相距五十里。
现在雁门郡的局势自两年前突厥围杨广于汾阳宫，雁门合郡被突厥人肆掠了一遍，只有数城硕果仅存。之后虽略有恢复，但又遭到刘武周叛乱。刘武周投靠突厥后，就率军攻打雁门。
刘武周军兵锋坚锐，雁门郡郡丞陈孝意，武贲郎将王智辨屡战不敌，丢了天险雁门县，醇县，五台县，现在收拾残兵退守繁时县。遭刘武周围攻之际，陈孝意屡次向晋阳留守李渊求援，结果送入的消息都如同石沉大海，没有任何音信。现在繁时县与太原郡通路已断，陈孝意，王智辨成了孤军，不过饶是如此二人却依旧不降，与刘武周继续对峙下去。
雁门郡五县，刘武周占了三县，陈孝意据守一县负隅顽抗，至于灵丘县，却暂时无人理睬，并非战略位置不重要，只是之前突厥入侵雁门时，这里破坏得最为严重，所以两年过去了，这里仍是一片荒芜。现在李重九决定重建灵丘县，在这里收拢流民。而重建灵丘县的目的，自然是在雁门楔入一个桥头堡，一面作为上谷郡的屏障，以抵御刘武周，另外也是保证飞狐县与怀荒镇之间的这条商路的通畅。
当然重修修复工作不止是灵丘县一处，在上谷郡李重九除了现在据有的飞狐，易，范阳三县之外，还需重建因流贼肆掠而荒废的，涞水，遂城，永乐三县。重建工作并非顺利，宋金刚虽败了，但山间还有不少流贼山贼，还有不少百姓担心为流贼袭扰，宁可藏在深山之中，也不肯下山。所以李重九让尉迟敬德，高楚等人率兵围剿，也算给与刚刚成立的郡兵，一个实战锻炼的机会，同时也作百姓的工作，让他们安心下山屯垦田地。
对于归降的山贼，流民，李重九都安置屯垦，力争在今年之内在这三县之内，让流民恢复耕种。现在这个时节，冬小麦已是赶不及了，所以就更不能误了春耕，苏素将春小麦的种子，以无息的方式给流民们发下去，让他们今年安心耕种，不收任何赋税，至于明年税赋减半，第三年才全额收取。如此政策之下，上谷郡每日都陆续有百姓向各个府县投靠，要求归籍为民。
见到这一幕，李重九不由感叹，当初王须拔肆掠上谷不过才一年，按照大业七年的统计上谷郡共有户三万八千七百，二十多万口的百姓，到了现在五年内，已是凋零到不足十万，果然是破坏只需一年，但论及建设却要十年之功。
纵观现在河北中原各地，如窦建德，杜伏威之流的众反王都忙着吞并势力，争夺人口，大肆扩军，以攻城略地劫掠钱粮，让麾下兵马百姓越多越好，力量更强，他们信奉当然人多自然势众。
论强取豪夺，窦建德，杜伏威当然好手，而李重九的优势却不在于此，比起人多势众，乱世中人心向背也是重要的。若是安定民生，领内百姓富足了，自己声望也就提升上去了，将来四方来投，攻略他人的领地也比较容易消化。与人多势众相较，声望也是势的一部分。
当然如此发展的弊处也是大大有的，就是声望起势太慢。正所谓发财方能立品，朱重八的义军当年在淮右的时候，军粮不足的时候还是吃人的，之后有了根本，这才讲究起礼义廉耻。而张士诚虽深得民心，最后城破时，全城百姓愿意与他同死，百姓有言，生不谢宝庆杨，死不怨泰州张。最后还败在朱元璋手上。
李重九要想追赶李渊，李密，自己首先要在中原蓄积声望，培养自己的名声，而在草原上，则不必顾及名声，巧取豪夺，扩大势力，毕竟草原上鲜讲仁义，更推崇强者为王。
而对于李渊他们，则必须采用合纵连横之道，遏制他们作势的速度。现在李密在自己多番催信，讲述道理下，一直迟迟没有南下攻打东都。只要李密一日没有攻打东都，在关中的隋军就不会东进增援，而关中隋军一日不东进，那么李渊就不敢从晋阳起兵直取关中。这相当于多米诺骨牌，比较历史上，李密已推迟了半年，没有攻打东都，那么李渊也无法从晋阳起兵造反，那么夺取关中的计划，也会比历史上大大推迟。
但是李密现在没有回信，但这时草原上那帮长老们又开始急催，李重九也不愿意将这关系弄得太僵，于是安排好上谷郡的驻军防务之后，即率军返回草原。
大业十三年的正月，过完年后，李重九率领草原骑兵踏着积雪，从飞狐县取道灵丘县，返回草原。路途间经过灵丘县时，随路可以看那件衣衫褴褛的百姓们，犹如山间野人一般在雪地里走动，不少人甚至连鞋都没有，被冻得青一块紫一块。
而百姓们看到官军，都是纷纷躲了起来，李重九心觉得奇怪，当下命王马汉前去查探，之后得知原来这些灵丘县的百姓