鹉川之战，是上杉将军家开幕以来的第一次对阿依努人发起的较大规模攻势，战后北海道各羁縻令制国中，除了石狩川流域的阿依努人部落以外，其余阿依努人部落纷纷选择向上杉将军家臣从，并主动献上人质以及当地的特产——海狗肾、海濑皮、鹿皮、熊皮等。
而这时的上杉谦信见天下基本泰平，便派遣山内上杉家谱代家臣出身的大石芳纲上洛，向朝廷表面自己有将官位、一门总领等职尽数传给上杉氏虎的想法。
与此同时，已经开始接手上杉将军家诸多政务的上杉氏虎则是异常的繁忙。因为他正在作为上杉将军家直辖军势进行相关的改组，其中坚力量则是作为上杉将军家直属家臣的旗本、御家人以及一万石以上的谱代大名。
谱代大名与外样大名明显不一样的是，他们具有强烈的上杉家谱代家臣意识，效忠的对象是主家而非主君一人。
由上杉将军家旗本阶层所构成的直辖军势中，由番头统率大番、书院番、小姓组、新番、小十人组，这五支常备军势合称为“五番方”；还有徒组、百人组等构成的徒步军势，以及由先手铁炮组、先手弓组、枪组等持特定武器并接受物头指挥的特科军势。
其中，大番是最早编成的常备军势之一，也是最基础的骑马武士，在上杉谦信正式以江户城作为本据之际被编成了六个组（一组二十人左右）。而率领这支队伍的大番头最初大多是越后府中长尾一族、越后上杉庶流、府中长尾家的同族以及外戚所构成的自越后以来的家臣。例如高梨义政（高梨政赖四男，高梨赖亲之弟）、加地又三郎（上杉谦信姐夫加地春纲从兄）、千坂高信（千坂景亲次男）、山本寺孝长（山本寺景长，山本寺定长之弟）等人。
上杉将军家还将江户城西北近郊的麹町和市谷附近的台地按家宅面积进行划分，建立起“番町”，并陆续在神田山、小川町等地建起屋舍，江户十至二十里内所谓“一夜宿”之地都被设置为知行地授予大番众，他们负责加强对江户城周边的警备、在城中安排巡逻的同时，有时也随从上杉谦信、上杉氏虎二人一道上洛。
原本，在上杉将军家大老八条景定的协助下，上杉将军家先后组建了左右虎捷军、左右龙捷军等常备军势，但随着上杉将军家所兼并的领国越来越多后，这些常备军势就需要被派往五畿八道的各个要害之地进行常驻，以此来震慑才臣从不久的外样大名们。例如小岛贞兴所节制的右虎捷军两千常备军势常驻于山城的普贤寺城；伯耆守护代福王寺孝重所节制的右龙捷军两千常备军势常驻于伯耆的八桥城；浦贺奉行长尾景宗（长尾彦丸，越后古志长尾家庶流长尾土左守婿养子，柿崎景家之子）所节制的左虎捷军两千常备军势常驻于上总八幡城（位于上总与下总两国的境目地带）；长野正宣（准一门格，上杉谦信养女婿长野业盛之弟）所节制的左龙捷军一千常备军势常驻于加贺的根上城。
左右虎捷军、左右龙捷军等常备军势原本就是从上杉谦信麾下的旗本先手役、段母衣众、旗本御手廻众等常备军势改组、扩编而来。这些军势原本就长期担任上杉谦信的宿卫以及负责本据周边的警备，甚至还需要与上杉谦信同行。
随着上杉将军家达成天下静谧，以及江户城升格成为东都之后，上杉将军家就需要填补负责宿卫东都常备军势缺少的问题。
再加上大坂城、骏府城、春日山城、二条城等重镇要地的改修完成以及被上杉将军家逐渐直辖化，上杉将军家还需要派遣一部分的常备军势进行驻扎。
这就使得原本并不起眼的大番逐步发展成为在江户城和大坂城、骏府城、春日山城、二条城等新直辖城池中负责护卫的在番军势（大坂城两组、骏府城一组、春日山城一组、二条城两组）。当初的六组大番在经过上杉谦信、上杉氏虎二人的多次扩编后就增加到了十二组之多。
而且，由于在番部队已经离开将军去守卫城郭，维持原有的规则也变得困难。时任摄津守护代兼任大坂城代的千坂景亲就对在番军势制定了相关规定，不仅禁止在番打架争执，还规定没有番头的许可绝对不可出城，不得入澡堂洗澡，不得与番众以外的人往来，不得与在近畿诸国奉公的谱代大名、旗本、外样大名等勾结。
另外，八条景定在离开东都前往京都之前，还为幕府新设置了两个名叫书院番和小姓组的近卫，负责护卫将军本人，也常常近侍于将军、世子左右。
正所谓一代亲两代隔。
景定为了能让上杉氏虎将来坐稳征夷大将军、武家栋梁之位，自然是不能对亲藩大名百分百信赖的。只有进一步加强将军直属力量，才能确保上杉将军家的统治稳如磐石。
之所以被称之为书院番，是因为他们常驻守在江户城白书院的“红叶之间”（先前曾常驻守于虎之间），小姓组则常驻于黑书院的“西湖之间”，因其庭前有片花田，也被称为“御花田番”（明历三年大火之后取代书院番居于“红叶间”）。
在天正二年以后，上杉氏虎还设立了新番，因驻扎于江户城的“土圭间”（后改为桐之间），因此得名“土圭间组”。
这些驻守在江户城中的宿卫军势是随着大番开始在大坂城、骏府城、春日山城、二条城等直辖城池驻守而发展起来的，其主要构成为原上杉谦信麾下的段母衣众。
之后，这些宿卫军势还被第二任将军上杉氏虎分割再编为书院番六组、小姓组六组。此时，书院番头（兼任小姓组番头）是上杉氏虎年少时的近臣樋口兼续（樋口与六，樋口兼丰长子）、色部长影（色部胜长之侄）、新发田盛喜（新发田重家之弟）等人来担任。至于无法继承旗本家业的次男和三男，则是被上杉氏虎进行吸收，用于对书院番、小姓组、大番等军势进行一定增强和再编。