面对赵构的承诺，见岳家军能够得到扩充，收复中原有望，岳飞的心情自然是异常激动。
也就是在这一时期，岳飞亲手写下了有名的乞出师札子。
在这份奏疏中，岳飞详尽陈述了自己恢复中原的规划。
而宋高宗赵构在阅览了奏疏后，也是赞不绝口。
都督府更是将刘光世军情况通报给岳飞。划拨刘光世军岳飞，到此好像已成定局。
然而岳飞怎么也没有想到，张浚和秦桧会在这时候从中阻挠。
而赵构偏偏又听从了将人的建议，置之前的决定于不顾，同时下诏给岳飞道。
“淮西合军，颇有曲折。”
正所谓君无戏言，可赵构却朝令夕改，这让岳飞自然是满腹委屈。
岳飞几次求见赵构，都没能如愿，心中积怨，再加上之前两次北伐的事情，气急之下，岳飞直接上了一道乞罢军职的奏疏，还不等批示，只向随行机密官黄纵略微交代后，就离开建康，回到庐山为母守灵去了。
赵构闻知岳飞辞职，随即诏令鄂州军营将佐立刻督请岳飞还军。
而后又派张宗元到鄂州军中做宣抚判官。
赵构当然不可能就这么放走岳飞了，岳飞的本事他又不是不知道。
在朝廷的诏令下，李若虚，王贵只得去庐山请岳飞还军。
“将军，难道你真就想这样一走了之？”
“当初我们兄弟的说好的要一起光复中原，驱除外敌，如今外敌未退，将军难道就这样放弃了？”
两人苦劝六日，岳飞这才答应受诏朝见，还军视事。
几乎是同一时间，张浚用人不当，终于招致了淮西军变，张浚也因此引咎辞相。
得到兵变消息后，岳飞立即上疏表示愿率军进屯淮甸，拱卫建康行朝。
然而赵构只让岳飞到江州驻扎。
之后的九月，十月间，岳飞入宫觐见，期间向赵构提议立其养子赵瑗为皇储，谁知此事又遭赵构呵斥。
其实这点也体现了岳飞此人不懂朝堂之事。
赵构膝下本就无子，对于皇储的选立，可以说一直都是赵构心中的一根刺。
连秦桧这样的近臣都不敢随意在赵构面前提及此事，可岳飞却肆无忌惮的说了出来。
岳飞肯定是没有什么私心的，但这无疑是有些触及到了赵构的软肋啊，毕竟赵构这个皇位是怎么来的，他自己心里也清楚。
一时间，赵构和岳飞之间，出现了一些间隙。
偏偏又在这个时候，金太宗驾崩，完颜亶继承帝位，而军事首脑完颜宗翰也随着帝位的更迭而逐渐失势，于是年七月死去，完颜挞懒一派开始掌权。