宋设枢密院，为国家最高军事机构，知枢密院事一直由文官担任。其实，北宋的边关统帅也都由文官担当。比如，宋仁宗时，镇守西北防御西夏的两位统帅，一位是韩琦，另一位是范仲淹，时称"韩范"，都是当时著名的文人。南宋沿袭旧制，仍然由文官指挥军队，并且每支部队的规模、编制，都有一定的限制。
岳飞独立成军时只有正兵万人，但在镇压太湖杨么、钟相起义后，吸收了大批原起义军士兵入伍，军力大大增强，总兵力增至10万。这本来是件好事，但却引起了朝廷的深度不安。宋廷诏令岳家军以"三十将为额"，就是想以军官数量来限制岳家军的扩张。
但随着岳家军不断打胜仗，队伍也在不断扩大，不久即增至84将，大大突破了朝廷的编制限额。因为宋高宗不吭气，枢密院对此也无可奈何。
