当时石亨、曹吉祥非常骄横，皇帝非常反感他们。岳正私下对皇帝说：“现在(石亨、曹吉祥)二人的权势过重，请允许我用计策离间他们。”皇帝答应了他的请求。岳正出来后去见曹吉祥，对他说：“忠国公(石亨)为什么常派杜清来这里？”曹吉祥说：“承蒙石公垂爱，表达一种诚意罢了。”岳正说：“不是这样的，他是派人来监视您的行为的。”趁机劝曹吉祥交出兵权。岳正又来到石亨的住处，以皇帝的口吻命他自我收敛。石亨、曹吉祥揣摩到了岳正的来意，非常生气。曹吉祥去拜见皇帝，摘掉了帽子，哭着请求赐他一死。皇帝心里十分惭愧，好言安慰了一番，传召岳正斥责他说话不当。
石亨、曹吉祥制造流言，说岳正故意表现得公正忠直以获取名声，毁谤讥刺别人。皇帝很生气，将他贬为钦州同知。岳正途经漷县，因为母亲年老停留了十天。陈汝言让巡校向朝廷说明这一情况，并且说岳正曾经抢夺公主的田产。于是将他逮捕关押到狱中，杖打一百，流放到肃州。
石亨、曹吉祥被杀后，皇帝对李贤说：“岳正本来就曾说过石亨、曹吉祥骄横之事。”李贤说：“岳正家里有老母，如果能够放他回归故里，就非常好了。”于是，岳正被放归故里为民。
宪宗即位后，御史吕洪等请求恢复岳正和杨瑄的官职。皇帝下诏让岳正以原来的官职为讲论经史的官，参与修订《英宗实录》。当初岳正获罪时，都督佥事季铎请求皇帝将岳正的宅子赐给自己，到这时皇帝又下诏将宅子还给岳正。岳正回到朝廷后，自以为会被重用，但李贤想任命他为南京国子监祭酒，岳正十分不高兴。(后来)妒忌岳正的人伪造了岳正弹劾李贤的奏章的草稿，李贤(因此)很反感岳正。
成化元年四月，岳正被调出京城任兴化知府。岳正到了任上，修建堤坝，灌溉良田数千顷，并减少不必要的开支，整顿库存，想要大干一场。乡里的士大夫们不满他的所作所为，传播fei谤他的言论。岳正也厌恶了做官。成化五年觐见皇帝，于是辞官。五年后去世，享年55岁。岳正没有儿子，大学士李东阳、御史李经是他的女婿。
本文来源：http://www.010zaixian.com/gushiwen/guji/650607.htm