壹是隆慶四年(1570)七月，大學士、也是禦府老將的陳藝溱，對高拱有壹點懷疑，見高拱在內閣過於囂張，怕他不知所措，便奮勇退兵，引疾而去。不久，負責都察院的大學生趙貞吉因高拱而後悔參加考試，不得不停止。高拱，又傾斜，邱門生，奉中韓劾永亨。也抵制了張的非法拱。朱載垕的高拱盡快讓趙貞吉做了官。趙貞吉曾因高拱掌管內閣吏部，權力不亞於宰相。他要求李春芳尋找並掌管都察院，以遏制高拱，李春芳同意了。走後，不安，因徐階與高有隙，遂告假，於五年五月歸田(1571)。
高拱接任第壹巴掌，越來越囂張。當時，尹世振進入內閣協助政府。尹世振在魚鳧時也是高拱的同僚，由於沒有向高拱妥協，長期不能升遷。誌入內閣後，高拱郁郁寡歡。有人劾高拱的心腹張四維後，高拱懷疑是尹世振指使的，並威脅韓。尹世振忍無可忍，當著內閣的面批評拱道:“如果妳先追陳宮，再追召公，再追鞏俐，再追我。如果妳能長出這個座位？”說罷竟揮拳打高拱。隆慶五年十壹月(1561)，尹世振也被驅逐出境。這樣，除張外，老輔就完全被高拱排除在外了。高拱名列前茅，頤指氣使，專攻國手。
高拱與張共事時，國子監結識，誌趣相投，期望將來能入閣輔佐國家。但當嘉靖皇帝去世的同壹天，徐階，當時的法院記錄，只要求他的弟子張寫嘉靖的遺詔，而沒有通知他的對手，高拱，他們發生了爭執。此外，在待了五年的心腹們謠傳張為了救三個兒子，接受了徐階三萬兩銀子的賄賂，他們之間的誤會與日俱增。張與對高拱不滿的宦官暗中結盟。
隆慶六年(1572)正月，以高拱為國家棟梁，入極地行宮大學士。然而，他更加專橫。再加上他的得意門生，如韓濟、，沒日沒夜地在門外跑來跑去，花樣百出，專搞博戲，人人討厭。當初，高拱還捧著大清。，但後來他變得奢侈起來。他經常對人說:“不給日常用，我能怎麽辦？”弟子及屬下聞知，爭相獻上，“取之而聚之”，於是議論紛紛。禦史王文慧對時事冷嘲熱諷，說字連高，高拱呼之，以補寧夏之患。商和劉奮雍也試圖糾正拱，並給了曹大爺十樣東西以抵禦拱的不忠。其中，高拱有權報復，拒絕善良，逾越親友，大開賄賂之門等。朱載垕不聽。兩人都是辦公室外任命的。
當年五月，病危，召來高拱、張、高儀等大臣照顧他的生活。穆宗握著高拱的手說:“讓世界疲憊吧。”。朱載垕死後，由於遺詔，高拱計劃發動廖白驅逐鮑鋒，雙方正式決戰。
明神宗即位後，張指示的“大伴”是太監曾在內閣當著貴妃和陳皇後的面說的壹句話，“十歲太子，如何治天下！”改成“十歲小孩，如何做主人。”宣稱高拱謀立了藩王，貴妃和陳皇後都驚呆了。6月16日淩晨，“召集內閣、五府、六部。”會上，太監王鎮宣讀了壹份電文:“今日大學士高拱專權，擅政，奪了朝廷所有的付偉，禁止皇帝掌管。我想知道他想要什麽。我母親和兒子嚇壞了，坐立不安。帶著高拱回老家，閑著去。”要罷官，高拱聽旨後“面如死灰”，“汗如雨下，起不來”。張從後面把扶了起來。又制造了王事件，企圖謀害高拱。幸而在、吏部尚書葛守禮等人的努力下，張“慰書而止”高拱免於難。
萬歷五年(1577)，張回湖北江陵老家安葬父親，路過高拱故裏，專程看望高拱。見面時，他們掩面而泣，感觸頗深。高拱臨終前寫下《病榻遺言》四卷，描寫張勾結馮奪取會稽之位，把張描寫成陰險惡毒的人物，痛斥張“吹簫掐眼彈琵琶”。
萬歷六年(1578)十二月，高拱死於家中，葬於縣城北郊金閣勞芬村。萬歷七年(1579)，以“高降，北陸為諸侯，功不可沒”為題呈於復辟官。張死後，其病榻遺言發表，在京廣為流傳，催化了萬歷皇帝對張的清算。
萬歷三十年(1602)，高拱獻為太師，謚號文祥，其子高武官為司庫。