可惜的是，由于这些指令传递得太慢，当它们被送到岳飞手上的时候，岳飞已经按照之前的严令撤军了。岳飞的仓促撤军，发生了散乱但没有兵力损失。然而撤军之后，宗弼得以派遣较多兵力去对付此时刚刚抵达淮北的杨沂中。

▲赵构的心腹杨沂中，在评书里也被说成杨家将后代，但实际上在岳飞之死过程中杨沂中扮演的角色似乎也不光彩

八月中旬，杨沂中军到达宿州，以五千骑兵夜袭临涣县(今安徽临涣)柳子镇，却不见金兵踪影。他得知金方以重兵埋伏于归路，于是仓皇奔溃。金军乘胜占领宿州，因当地百姓欢迎过宋军，遂恣意报复，大肆屠戮。对于岳飞来说，碰上宋高宗这样一个心思难测的主君，实属为难。他选择了遵从十二道金牌撤军，结果反而间接导致了杨沂中丢失宿州（当然以常理而论，河南既然不守，淮北的城市不可能守得住）。折了面子的宋高宗自然把这笔账算在岳飞头上，而杨沂中也因此记恨上岳飞。1141年初春，完颜宗弼又对南宋发起报复性入侵，并故意派韩常率孤军深入，被张俊遣兵击败于柘皋。张俊得意洋洋，让岳飞不要来抢功。

▲柘皋之战

金兀术*一个回马枪，败宋军张俊、杨沂中、王德等人所部于濠上，高宗又叫岳飞，还斥责他来迟了。岳飞赶到时，宗弼已经潇洒地扬长而去。很明显，宗弼这次入侵一个精妙的布局，他摸准了宋高宗和张俊等人的心理，要把高宗和众将对岳飞的不满激发到最大化。然后他联络秦桧，抛出“必*飞而始和”，才能除掉他这一生中最大的对手岳飞。

▲四太子宗弼貌似鲁莽，实则老谋深算

随着宋金议和提上日程，绍兴十一年（1141年）四月，张俊、韩世忠、岳飞三大将被调离军队，到临安枢密院供职。五月，张俊在和岳飞巡视楚州韩世忠的军队时，暗中挑唆岳飞，欲一同分解此军，却遭飞严肃回绝。秦桧又欲陷害韩世忠，岳飞再次保全了韩世忠。然而秦桧对韩世忠下手，很可能是醉翁之意不在酒，因为岳飞才是金兀术的真正目标。韩世忠为人跋扈，远比岳飞遭宋高宗讨厌，说服宋高宗收拾韩世忠，比说服宋高宗收拾岳飞容易得多。但岳飞一再保护韩世忠，就能让高宗对韩世忠的怨气转移到岳飞头上。这也是金兀术和秦桧意料之中的。