绍兴十一年（1141年）二月，晋人再次率军攻打宋朝，直指梁淮地区，不久入侵泸州（今安徽合肥），来势汹汹。 张钧派兵渡河迎敌。 先头部队王德军先攻占贺州（今安徽和县），再击败晋将韩长玉寒山，收复昭关。 后来，王德、杨存忠、刘琦等将领在浙高（今安徽潮县西北部浙高镇）伏击晋军，取得了大胜。 这时岳飞也率军援手，师团前往泸州，晋兵避风而逃。 张军通知岳飞，敌人已经撤退，没有必要再前进了，岳飞返回蜀州（今安徽）待命。 但不久，金无术阵亡，突破了濠州（今安徽凤阳东北），王德和杨存忠在濠州城西遭到晋军伏击，败败归来，杨存忠率领的宫前三万余人几乎全军覆没。 岳飞闻讯，带兵前来援手，晋军在浩州大肆烧掠之后，已经自行撤退了。
哲高的工作受到大家的称赞; 而打败昊州，是大家的责任。 宋朝廷没有追究昊州战败的责任，而是谈起了“哲高”的功劳，追授了张俊步在绍兴战败晋军十年之久。 于是张军拜上了枢密使，手下王德等六人当天率先领奖。 韩世忠和岳飞也同时晋升为枢密院副使，张、韩、岳三人同时被解除军权。 原来，赏识“哲高”的功劳，暗中提拔张、韩、岳三将军，夺取他们的军权，是赵苟和秦晖蓄谋已久的阴谋。 张军是将领中年纪最大的，也是赵苟最欣赏的。 他与秦晖的关系也很密切。 秦晖在夺取三将军的军权之前，曾与张军秘密商量过，也就是在三将军的军权除去之后，就允许张军率领天下所有的兵马。 所以，当宋朝廷赏赏“哲高”的功劳时，张军是第一个率先将军权交给赵苟的人。
张军和岳飞早就矛盾了。 岳飞后来升职，军纪严明，英勇善战，成绩斐然，晋升极快，张军很是嫉妒。 绍兴六年（1136年），越军挥兵北上，连克书郡震天下。 在北伐即将成功的时候，张军故意割掉了岳军的粮草，让他不得不下课回来。 “哲高”之战胜利了，张军为了独占功绩，居然通知岳军待命，不前进。 濠州之战败了，张军怕岳飞告上他，于是先诬告岳飞不带军。 张军想接受韩世忠的军权，暗中和岳飞商量，但岳飞断然拒绝。 所以，张军和岳飞之间的差距并不浅。
秦辉密谋杀死岳飞，张俊礼帮了他一把。 在秦晖的授意下，张军先是扬言要收买岳飞的将军王贵。 然后，他贿赂了岳家军队张贤部的王军，并命令王军出面诬告张贤，将张贤抓进监狱，牵连岳飞。 后来，岳云被捕，张、岳两人被刑讯逼供，在秦辉陷害岳飞的过程中发挥了重要作用。
绍兴十二年末（1142年），张钧因掌握军事权权不愿登基，被秦晖降职。 绍兴于二十四年六月去世，享年69岁。 高宗赵辍出王朝三天，收了一件衣物，“皇帝在雨中丧”，追着国王。