这样一来，内阁里的几位老同事，也都一个个受不了他。像陈以勤，李春芳几位，本来都是和高拱一起为朱载垕讲学的老同事，关系一直不错，这下纷纷反目。特别是李春芳，挂名的首辅，出名的好脾气，都受不了高拱的跋扈，主动打报告辞官。更雷的是殷士儋，实在受不了高拱的欺负，竟然在内阁里挥拳殴打高拱，演出了明朝内阁历史上一场活剧。
结果一通闹将下来，高拱有了首辅的名分，内阁的成员，往日的旧友，竟然就只剩下了张居正。到了隆庆六年，高拱权力更盛，上有皇帝信任，身边门生簇拥，权力如日中天。
而一向与高拱亲密合作的张居正，长期以来，都是扮演小弟角色，但高拱得寸进尺，越发嚣张，眼看老同事都给排挤得差不多，张居正也着慌，心里也打开了算盘：等着他轰走我，不如我轰走他。
但高拱此时实力太大，不管拼哪方面，张居正都不是对手。但张居正有办法：拉外援。
张居正的外援对象，就是宦官集团的二号头目：东厂提督太监冯保。
说起冯保和高拱的恩怨，说来也是高拱自找，深得朱载垕信任的高拱，不但抓住了内阁大权，甚至手还伸进了司礼监，连司礼监掌印太监的人选，都由他来操控。
而在这事上，高拱的态度也很明确：就得找没本事，容易控制的。于是先是陈洪，又是孟春，一个是管日用品出身，一个是做饭出身，全是摆设。
但冯保就惨了，此人能力出众，既能管特务，文化水平又高，还精通书画收藏，外加一肚子心眼，实在不是个善茬。因此高拱百般堤防，拼命压制，终于把冯保压制怒了，和张居正一拍即合。
四：孤傲强人惨算计
就在俩人顺利勾结后，隆庆皇帝朱载垕的生命，也走到了尽头，他虽然才三十六岁，而且国家大事很有主意，无奈自幼体弱多病，登基后又做甩手掌柜，成日沉溺玩乐，结果身体早早垮掉。隆庆六年（1572年）五月，朱载垕去世，庙号明穆宗。八岁的小太子朱翊君即位，次年改年号为万历。这就是大名鼎鼎的明神宗万历皇帝。
在人生的最后时刻，朱载垕对于高拱，还是寄托了厚望，当众对高拱说，国家大事，还需要您多多操劳啊。高拱也放了心，以顾命大臣自居。孰料一宣读遗诏，却完全不是这么回事：竟然宣称国家大事，由内阁和司礼监共同商量。这下高拱傻了，大明的祖制不给破了吗？紧接着一颗炸弹又扔过来：司礼监的掌印太监也换人了——冯保。
这下高拱明白了，背后一定有鬼，但经过这么多次政治斗争胜利，他这次信心也很足，觉得不过是冯保背后小动作，很容易对付。结果高拱很快发动了攻击：不但亲自上书揭发冯保奸诈，更发动门下门生写奏折弹劾。按照高拱的算计：小皇帝岁数小，这么一吓唬，必然拿冯保开刀。
但没有想到，张居正早和冯保勾结，高拱的这番算计，先由张居正告诉了冯保，接着俩人火速行动，跑到万历皇帝母子处搬弄是非，尤其是高拱私下说话不注意，一句“八岁孩童，如何治天下”，被冯保添油加醋，变成了“ 十岁孩童，如何做天子”。一句话说错，后果很严重，外加冯保动用特务机关，硬给高拱安插个迎立外藩的罪名，这下高拱没救了。次日一早，圣旨就下来了：高拱擅权无君，逐回乡里。
这样一个突然袭击，着实出乎高拱预料，他自己闻讯后脸色苍白，险些没给栽倒。算计了高拱的张居正，倒是好人做到底，还给高拱申请了公费的马车，护送高拱回家乡。但整个过程对于高拱来说，却是个奇耻大辱。他与张居正的往昔同僚情谊，就此彻底决裂。
黯然回家的高拱，过了几年孤独凄凉的生活。万历六年（1578年）病故于家。在此期间，冯保还曾罗织罪名，污蔑高拱谋反，差点将其逮回京城问罪。幸亏一干同僚拼命营救，这才逃过一劫。一直到万历皇帝亲政后，下诏书称高拱“担当受降，北掳称臣，功不可泯”，赐太师爵位，谥号文襄。这位亲手开启隆万改革，为明王朝焕发第二春的政治家，名誉终于彻底昭雪。