。還有另一個閣員，也曾名義上做過宰相，他與呂惠卿極不相容，他想使王安石官復原職，用以抑制呂惠卿。他除去請皇帝罷黜呂惠卿，重用王安石之外，又送一密函與王安石。控告謀反自然事極嚴重，王安石以七日之內，火速晉京。
王安石與謀反一案確無干係，在神宗熙寧八年（一0七五）二月，又重任宰相。這時使鄧綰有幾分尷尬，他只好連忙背棄呂惠卿，又投入王安石這邊來。為了重獲王安石的青睞，他決定出賣呂惠卿。鄧綰背著王安石，暗中和王安石的兒子勾結，控告呂惠卿勒索華亭商人五百萬緡。朝廷降呂惠卿官，出為太守。鄧綰以呂惠卿如此輕易逃過，心有不甘，乃聯合呂嘉問請求重新審問，將呂惠卿羈押在京師的禦史台監獄中。
一度權勢炙手可熱的小人權要，-一遭到罷黜，鄧綰也非例外。鄧綰還依然是精力充沛，他親眼看到呂惠卿垮臺，又看出皇帝對王安石也日形厭倦。他以天縱陰謀之才，洞燭機先，心想下一個身攬大權的人必是王安石的兒子和女婿。他上一表章，請皇帝將此二人升遷重用。但是王安石和皇帝對鄧綰的變節背信早已厭膩，不但不心存感激，反將他罷官斥退。鄧綰現在對人性應當是失去了信心吧！
呂惠卿在禦史台監獄等待審判之時，他對王安石發出了最後的一擊。原來那些年他保存了王安石的一些私人信件，以備敲詐之用。現在他把這些信都呈交給皇帝，控告王安石在皇帝背後圖謀不軌，因為有幾封信上有"無令上知此一帖"。皇帝對這些紛亂如麻的事早已厭惡，而今在這些信上的發現，真使皇帝對王安石第一次發了脾氣。王安石痛駡自己的兒子，不該背著他胡亂攻擊呂惠卿。他兒子顯然不知道呂惠卿手中藏有這些信，並且握有他父親的把柄，深悔自己行動鹵莽。受父親斥責之後又心中憋氣，立刻病倒，不久背上生出了惡瘡。王安石一向信佛。他請和尚誦經，請醫生開藥，但均無法救兒子一命。兒子王秀之死，是老相國的一個嚴重的打擊。這位相國對政治與人生的虛幻，大徹大悟了，他感覺厭倦，呈請辭官歸隱。皇帝允許他在熙寧九年（一0七六）十月辭去職務，但仍保有若干最高爵位，王安石並非遭受罷黜。數年之後，有人在金陵附近的鄉間，看見他騎著驢，嘴裏喃喃自語， 不清說些什麼。