门玄武门夺取权柄，对北门禁军自然更加的重视，先后增设飞骑、百骑、左右屯营等，以增强北门军力，但北门禁军仍然归南衙统领。
高宗龙朔年间，在北门屯营基础上设立御林军，用以直接统率北门禁军，北门军权开始逐渐由南衙分离出来，但负责大内宿卫的主力仍然是南衙禁军。
等到武后专权时期，由于南衙对此本就持有不同意见，所以对北衙禁军的独立性要求便更高。
除了御林军扩充之外，作为精锐部队的百骑也不再只局限于随从游猎职能，编额大大扩充，特别是在玄武门增设飞龙厩常备战马，使得北衙禁军机动力更强，军械更加丰富，战斗力和对禁宫的控制也渐渐超过了以府兵步卒为主的南衙禁军。
当然，眼下的武则天仍然还不敢将北衙军权完全剥离出来，独立于南衙禁军体系之外。宰相有监南衙军事的责任，所以现在武则天还是不能彻底的放飞自我。
北衙真正获得与南衙分庭抗礼，乃至于超过南衙的地位，还要等到盛唐玄宗时期。安史之乱的中唐之后，府兵崩溃，南衙再无上番府兵可用，地方节度使壮大起来，北衙更是成为中枢唯一可以依仗的军事力量。
李潼一家所居仁智院，依傍玄武门，属于北衙的值守范围，千步阁值宿禁军，自然就是北衙御林军。宿卫渐多，宫禁氛围也越来越严重，可以想见外界的形势也越来越危险。
时间很快到了八月，某日午后，掌直徐氏匆匆来见李潼，神色严峻道：“琅琊王反博州，太后移驾贞观殿……”