提到岳飞的“岳家军”，大家都很熟悉，无论是历史书上，还是小说或者影视剧中，都有“岳家军”的叫法。岳家军纪律严明，训练有素，“冻死不拆屋，饿死不掳掠”，金人有“撼山易，撼岳家军难”之语。但在事实上岳家军是南宋民间的亲切叫法，而不是岳飞想出来的私家军号，岳飞从来都没有打着“岳家军”旗号，更没有称自己率领的军队为“岳家军”!
岳飞所部对外的正式军号先后被定位神武右副军、神武副军、神武后军和行营后护军，岳飞对外自称的正式军职先后有：神武后军都统制、湖北京西路宣抚副使、太尉、湖北京西路宣抚使、河南河北诸路招讨使等，而不是自称什么“岳家军统帅”!
南宋绍兴五年(1135年)，南宋朝廷下令更改五支屯驻大兵的军号，命名为行营护军。张俊军称行营中护军，韩世忠军称行营前护军，岳飞军称行营后护军，刘光世军称行营左护军，吴玠军称行营右护军。岳家军前后更改了神武右副军、神武副军、神武后军和行营后护军四个正式的军号。
当时民间习惯“以姓为军号”来称呼南宋各路大军，例如民间曾经称张俊带领的军队为“张家军”、称韩世忠带领的军队为“韩家军”、称岳飞带领的军队为“岳家军”，这种称呼不但好记而且也显得亲切。
这种称呼的习惯不但用在在外作战的军队，连南负责直接保卫宋高宗赵构人身安全近卫部队(杨析中指挥的殿前司军)都被叫做叫“杨家军”。
所以，岳家军不是岳飞的私人军队，它的最终统帅权还是朝廷，岳家军的财权和人事任免权都在朝廷的手中。这也解释了为什么岳飞被陷害甚至被杀害后，岳家军虽然悲痛，但并没有起兵造反。岳家军的性质和后来曾国藩的湘军，李鸿章的淮军、袁世凯的北洋军是有很大区别的，后者的部队带有很大的私人军队性质。