文官的势力，又要与之合作。杨廷和是正德很重要的一枚棋子，杨廷和既是正德的师傅，亲信，又是文官领袖。是正德与文官联系在一起的桥梁枢纽。正德通过杨廷和与文官沟通。而正德的重心就在建立武勋上。
其实这也是正德避重就轻的做法。正德希望能通过建立强大的武勋，重塑勋贵集团来为自己制衡文官。
但是正德有正德的政治思路，杨廷和有杨廷和的政治思路。
在杨廷和看来，正德所做的都是邪路，正德不亲近他们这些正人君子，反而与那些粗鄙武夫走的近，正德不知道武夫乱国吗？不仅仅是杨廷和，以杨廷和一大批官员弘治老臣，都怀念弘治时期，君臣相得的局面。
杨廷和觉得自己没有教好正德，是自己的过错。但是万万不允许，有一个如正德一样的皇帝。正德看中雍王最大原因，是类己。而杨廷和不让雍王登基最大的原因，也是太像正德了。不是一个安安分分垂拱而治天下的皇帝。
“陛下，”杨廷和忽然觉得自己的嘴巴有一点干裂，不过短短的一瞬间，杨廷和想了很多很多，最后下定了决心。毅然说道：“臣以为雍王不可继承大统。”
杨廷和这一句话说出来，觉得气氛立即凝重起来了。
“你说什么？”正德大吃一惊，他预料过杨廷和会拒绝。但是后来觉得杨廷和不会拒绝，即便是拒绝，正德也有自信说服，但是万万没有想到杨廷和会说的如此斩钉截铁，不给自己留丝毫后路。单单凭借他这一句话，将来如果雍王继位，杨家根本没有好果子吃。“
“臣，以为雍王轻佻，不近圣学，不可继承大统，愿陛下另择良储。”杨廷和慢慢的平静下来。
正德猛地咳嗽起来，一边咳嗽，一边用眼睛死死的盯着杨廷和。两人目光交汇，一时间所有的声音都寂静下来，只有正德一声重过一声的咳嗽。好一阵子，正德的咳嗽劲才过去了，正德缓缓的说道：“轻佻，不近圣说？不知道杨先生，是说雍王，还是在说朕啊。”
这一句，正德几乎是吼出来的。身边的太监纷纷跪倒在地，不敢抬头。