开元十八年（730）某日，王毛仲生了儿子。唐玄宗派高力士前往祝贺，并且封那婴儿五品官衔。力士回宫后，皇帝陛下兴致勃勃地问：怎么样？毛仲很高兴吧？
高力士答：王毛仲说，这样的孩子不够三品吗？
玄宗大怒。
其实，王毛仲此言是要羞辱高力士，也是发泄对宦官受宠的不满，因为高力士的官阶正是三品。所以，他要把孩子抱出来给高力士看，意思是我这身体健全的儿子才五品，你这个连命根子都没了的家伙又凭什么三品？
唐玄宗却理解为王毛仲泄愤，因为不久前王毛仲索要兵部尚书的职位被皇帝拒绝。于是高力士趁机说：北门奴才气焰太盛，又早就结成了团伙，恐怕不是长久之计。
北门就是玄武门，那可是经常发生政变的地方。唐玄宗将王毛仲等家奴安排为北门禁军的将领，就是要让他们当看门狗。但是，走狗如果对主人呲牙咧嘴，则非杀不可。于是皇帝在剥夺了王毛仲的兵权之后，又将他赐死。[44]
张说却很乖巧。他在被免去中书令职务十个月后，就以尚书省副长官（尚书右丞相）的身份退休，专心致志从事学术研究，成果有《大衍历》和《开元礼》等等。宋璟也远离了是非中心，退休住在洛阳。他们两人都寿终正寝。
朝廷也变得安静起来。
实际上张说罢相之后，朝堂之上就乏善可陈。这固然因为人才难得，同时也因为玄宗厌恶党争。因此他宁肯宰相的能力差一些，威望低一点，也不能让他们成了气候。
可惜树欲静而风不止，斗争与否也无关乎能力。此后多年，宰相班子就像走马灯，却没有一个是团结的。皇帝按下葫芦起了瓢，不胜其烦。直到开元二十一年（733）三月，中书令萧嵩推荐韩休搭班子，大家才觉得可以松一口气。
然而他们又错了。
萧嵩其实并不了解韩休。他推荐韩休，只不过认为韩休为人柔和，却没想到此人外柔内刚。当时，玄宗皇帝要流放一个县尉，新任宰相韩休却说：该犯并非大奸大恶，陛下应该抓大放小。金吾大将军某某贪赃枉法，民怨沸腾，问题更为严重。臣请先处分某将军，再处分那个县尉。
玄宗不同意。
韩休说：陛下只拍苍蝇不打老虎，臣不敢奉诏。
玄宗只好同意。
这件事让所有人对韩休都刮目相看，就连退居二线的宋璟都说：没想到韩休竟能如此，这是仁者之勇啊！[45]
玄宗也对韩休肃然起敬，甚至忌惮。据说，皇帝只要稍微放纵一下自己，就会左顾右盼说：韩休知道吗？更为夸张的说法是：话音刚落，韩休的意见书就送达了御前。
不能随心所欲的皇帝只好对着镜子叹气。
身边人说：自从韩休拜相，陛下就瘦了许多，也没有过过一天舒心的日子，为什么不罢免他？
玄宗说：朕是瘦了，百姓可就胖了。萧嵩顺着朕，可是退朝之后朕睡不着。韩休虽然喜欢顶撞，可是朕睡得香。朕用韩休，不是为了自己，是为了江山社稷啊！[46]
这时的唐玄宗，还真不糊涂。
萧嵩却忍无可忍。他实在受不了韩休这刺儿头，也受不了他在朝堂上的得理不饶人，于是向皇帝申请退休。
玄宗说：朕又没烦你，为什么要走？
萧嵩说：现在走人，还来得及。等到陛下烦了，臣恐怕连脑袋都保不住。说完，泪流满面。
玄宗皇帝明白了。他的办法跟以前一样：宰相不和就同时罢免。于是，萧嵩改任尚书省的副长官，韩休则改任工部尚书。新宰相一个是京兆尹裴耀卿，任门下省副长官；还有一个则是张说的接班人张九龄，任中书省副长官。[47]
新的一幕也即将开始，虽然需要前奏。