这件事完毕后不久，雍正总算对岳钟琪失去了耐性，此刻军机大臣、内阁大学士鄂尔泰又乘机奏本，竭力弹劾岳钟琪作战失利之事。毕竟，雍正下诏削去岳钟琪三等公爵和太子太保封衔，降为三等侯，但仍让他掌管大将军印，持续统兵作战。
惋惜的是，前哨战事仍旧没有好转，雍正只好下旨诏让岳钟琪离疆返京，由副将军张广泗护宁远大将军印，暂代岳钟琪全权指挥战事！
就在岳钟琪怀着坐卧不安的心境赶到京城时，张广泗弹劾他的奏折也随之到了雍正帝的龙案；与此一起，军机大臣鄂尔泰也再次弹劾岳钟琪作战晦气。
面临大臣们的弹劾，岳钟琪也无话可说，究竟他确实是百战百胜。所以，雍正下诏将岳钟琪关进监狱待审；两年后，兵部依律判处其斩决。不过，雍正念其当年平青海之功，便将斩决改为“斩监侯”，也便是将死刑改为无期徒刑。
这一年，岳钟琪49岁，他的命运，好像也就比当年的年羹尧好那么一点点！
一年后，雍正逝世，乾隆继位。
在乾隆继位后的第二年，他命令开释岳钟琪，让其回老家成都洗心革面重新做人；这以后十一年，岳钟琪都在老家成都隐居。这十一年，也是岳钟琪终身最平平和安稳的日子。
据史书记载，岳钟琪在成都城外百花潭浣花溪畔结庐寓居，在这十一年里，他总是一身布衣木履，家常便饭；清晨早上，他便在宅院里舞几把刀剑；茶余酒后，喂一喂鸡鸭家禽；晚来掌灯，他秉烛夜读《楞严佛经》，可谓清闲自得。
惋惜的是，清闲的韶光总是时间短的，作为岳飞的后人，岳钟琪毕竟不会这样平平的走完终身。
乾隆十三年，因为大金川暴乱越演愈烈，乾隆帝第一时间想到了隐居在成都的老将岳钟琪，随后他下诏封爵岳钟琪为四川提督，赐孔雀花翎，让其率军平定巨细金川之乱！
这一年，岳钟琪62岁，老骥伏枥，志在千里！
尔后一年，在岳钟琪的英明指挥之下，巨细金川之乱总算画上满意的句号。两年后，西藏珠尔墨特为乱，乾隆又钦定岳钟琪出征平乱，成果岳钟琪不负众望，满意完成任务！
四年后，重庆迸发大规模农民起义，此刻岳钟琪已68岁，且痨肺病也日重一日，但乾隆仍是第一时间想到了他，而岳钟琪也不负众望，尽管带病出征，但仍然很快平定了暴乱。
惋惜的是，在班师回朝的路上，岳钟琪因病情恶化，溘然长逝，享年68岁！
音讯传回京城，乾隆沉痛不已，他亲笔给岳钟琪写下挽联，称其为“三朝武臣巨头”。自此，岳钟琪总算给自己的终身，画上了一个最满意的句号！
