也不在乎。没想到高拱通过第三方给地方势力一个许诺，地方势力在是否支持徐阶上有了分歧。支持徐阶的人理由是徐阶才是他们知根知底的人，这样的人大家可以放心使用和依赖，高拱却不能和他们一条心。不支持徐阶的人理由是徐阶年纪偏大，既然有年纪比较轻的高拱主动投靠过来，不如放弃徐阶全力支持高拱担任内阁首辅。由于这个原因徐阶被隆庆皇帝重新启用后不久，再一次被高拱逼走了。这一次地方势力看出了徐阶的年老无力，从而决定不再全力支持徐阶。
徐阶黯然离开权力核心后，高拱和隆庆皇帝发现地方势力并没有完全移交。徐阶利用自己的关系，依然控制和遥控着一些人一些家族。这些人和家族和徐阶有千丝万缕的关系，有的是徐阶的亲戚，有的是徐阶的门生，有的是徐阶利益集团的核心成员。他们不可能马上和徐阶脱离关系，徐阶利用这一点企图逼高拱向自己低头。可是徐阶想错了，脾气不好又性格高傲的高拱不会向徐阶低头。高拱当初不怕严嵩，也不怕徐阶，现在更加不会向一个已经是老百姓的徐阶低头。就这样地方势力、徐阶和朝廷就这么尴尬着，几乎哪一方都没有好处。地方势力因为得不到朝廷的支持，让他们办事的时候麻烦不少。徐阶两头不讨好，朝廷不愿意理会他，地方