公元1141年三月十三日，兀术率军渡过淮河北返。金军的威胁解除，赵构和宰相秦桧马上将矛头转向了前方掌握军权的三大武将。哪三大将？第一位是京东淮东宣抚使、兼河南北诸路招抚使韩世忠；第二位是淮南西路宣抚使、兼河南北诸路招讨使张俊；第三位是湖北京西路宣抚使、兼河南北诸路招讨使岳飞，三人独当一面，形同于一路诸侯。
刘光世本来是淮西宣抚使，也是一路诸侯，但公元1137年因从庐州败退，被罢了军权，张俊接管了他的位置。虽然公元1140年临时起用，任命为三京招抚使，但原来的淮西部将都拆散了，刘光世的影响力完全不可和以上三大将同日而语。
四川方面，元老级人物吴玠已病故，此时统帅是胡世将，头衔仅是四川宣抚副使，而且是文臣，武将吴璘是胡世将的部下。所以四川很稳固，赵构很放心。
另两位后起之秀杨沂中和刘錡。杨沂中因为“藕塘之战”胜利被赵构提拔为淮北宣抚副使，刘錡因为“顺昌之战”胜利被提拔为淮北宣抚判官，是杨沂中副手，两人合力担当一面。
所以此时，朝廷中手握重兵的只有三大将。怎么解除三大将的军权？代理吏部侍郎范同向秦桧献策，采取明升暗降的办法，升他们为枢密使，然后罢免他们的兵权，秦桧大喜，立即向赵构建议，以不久前“柘皋之战”胜利为由，召三大将到临安论功行赏，赵构正为此事伤脑筋，秦桧摸透了赵构心思，秦桧一提，赵构当即予以采纳。
在大宋，枢密使地位仅次于宰相，大宋朝除了狄青、郭逵等少数几位威望素着的武将外，基本都是文臣担任，这是武将梦寐以求的职位，可以说谁都没法拒绝，谁都会担任。范同名“饭桶”，出的鬼点子可谓高明之极！
四月十三日，朝廷命韩世忠、张俊、岳飞赴临安受封。四天后，韩世忠、张俊抵达，岳飞却没有不见踪影。这下赵构和秦桧又紧张了。
怎么办？
秦桧和参知政事王次翁密谋一阵后，又想出了鬼主意，他们公开在西湖为三大将设置宴席，秦桧从朝中出来时，就对政事堂的值班官员道：“等岳少保来便通报。”
秦桧又命政事堂的公共食堂官员摆好岳飞的餐具，岳飞不来，就不正式开席。这一手端的毒辣！既人觉得秦桧他们礼待武将，又似乎让人觉得岳飞傲慢无礼，同时还离间张俊、韩世忠和岳飞的关系。
这样连续等了六七天，岳飞总算到了，四月二十四日，朝廷下诏，韩世忠、张俊拜为枢密使，岳飞的任命却变成了枢密副使。尽管位列参知政事之上，但岳飞有没有觉得窝囊，我们不得而知，可岳飞做了枢密副使以后，并不十分安心，此后岳飞几次上疏要求再回军营带兵，却是事实。
相比之下，张俊和韩世忠就乖巧得多。三大将被夺了兵权后，四月二十七日，张俊首先表示，将自己所统兵全部交朝廷，隶属御前司，自己要到枢密院上班，并极力附和赵构、秦桧议和，赵构当然高兴异常。
韩世忠虽然不同意议和，但他有一个举措让赵构很放心，那就是，接受枢密使任命后，韩世忠将军队储存留下的钱粮一百万缗、米九十万石、十五个酒库全部捐给国家，这就多少对朝廷表明了自己的忠心！
四月底，朝廷下诏，罢除韩世忠的“淮东宣抚司”、张俊的“淮西宣抚司”、岳飞的“湖北京西宣抚司”，宣抚司下面的统制官改为“御前统制官”，还在各自原来驻地布防。
这份诏书有很深刻的影响：第一，三大宣抚司就此解散，此后不存在了；第二，原三大宣抚司节制的统制官，直接接受朝廷任命，接受朝廷管辖，而不是像以前一样，接受原来的宣抚使按“便宜处置”的权力任命，从而让三大宣抚司的官兵不再是半私人化武装，而是真正成为朝廷的军队。明白了这一点，我们才可以理解，为什么岳飞的军队称“岳家军”，韩世忠的军队称“韩家军”，张俊的军队称“张家军”，更可以理解，为什么赵构对下面的武将防了又防，疑了又疑！
五月，赵构命张俊、岳飞到楚州（江苏淮安）巡查边防，并安置韩世忠的部队回镇江，因为自公元1133年九月开始，韩世忠就是淮东宣抚使，一直在淮东活动。镇江、建康、楚州一带是他的经营多年的老地盘。
赵构的这一招，又是妙不可言。罢除三大宣抚司，只是从法理上解决问题，“御前统制官”仅改了一个名称，实际还是原宣抚司任命的统制官。除了张俊交了兵马，完全消除了隐患。而韩世忠只交钱粮，军马却还可以遥控指挥。岳飞的对原宣抚司军队的控制力就更强了。
赵构让张俊、岳飞去安置韩世忠的部队，一是看韩世忠的反应，二是看岳飞的反应。韩世忠看到了这一点，坦然处之。可惜的是，岳飞没有看清楚，岳家军还牢牢地抓在自己手中。
所以说，文人玩政治，比武将就是要胜出几筹！
佐料：就私家军问题，公元1140年七月，岳飞郾城之战期间，左宣议郎王之道上疏尖锐地指出了，我们来看看《建炎以来系年要录》卷一百三十七是怎样记载的。
王之道上疏道：如今大军汇集边境，可是没有设置统帅。国家用兵十六年，士卒隶属各自的将帅，将帅把他们作为亲附的私兵。兵卒隶属张俊，则称“张家军”；隶属岳飞，则称“岳家军”；隶属韩世忠，则称“韩家军”。
他们相互之间如仇敌，相互防备如盗贼，自己无心为公，反而惴惴然害怕别人奉公，以致名誉盖过自己；自己不能立功，反而惴惴然害怕别人立功，从而官爵高过自己。而且他们之间平日存在这样那样的矛盾。如果让他们在关键时候面临厉害关系，如何可以确保他们不为敌国利用？
当时正是用兵用人之际，赵构仅将王之道降了一级。但可以肯定的是，王之道的话，赵构很是赞同和认可的，也完全听进去了。