从事后来看，张说罢相的起因其实从泰山封禅归来就已经开始，就在张说因为封禅大典的顺利举行而声威到达顶点时，御史台两位中丞之一的宇文融悄然向皇帝上了一本改革官员选拔程序的奏章。
在这道奏章中宇文融提出了一个建议，建议将吏部对官员铨选的权力分为十铨典选，也就是将原本由张说主掌的吏部铨选权分割出来由韦抗、卢从愿、宇文融等十人分掌，结果直接交由皇帝审核。
铨选关系着所有官员的考核、任用、升迁，实是首辅宰相最核心的权力之一。这个建议在皇帝李三郎那里获得了通过，但作为首辅宰相毕竟还是有发言权的，尤其是张说还身兼着中书令，而中书省最重要的权力就是复核封驳。
自此，一个新的战场被开辟出来，宇文融等在铨选之事上每有奏请，皆被张说所抑，最终导致的结果是铨选失叙。而这样的结果显然是李三郎所不能接受的。于是，宇文融成功的挑起了李隆基对张说的恶感。
在此期间，据说张说最为信重的张九龄曾苦口相劝，“宇文融承恩用事，辨给多词，不可不备也”，但张说对此却是不以为然，回应张九龄道：“此狗鼠辈，焉能用事？”
就在铨选之战开打的时候，一个重要的任命也同时出炉。彼时主掌官员弹劾大权的御史台主官御史大夫出缺，张说举荐多年来与他关系融洽的崔日用接任此职，李三郎却钟意于贵族出身的崔隐甫。
张说对于崔隐甫接任御史大夫极力反对，因为崔隐甫是靠荫庇而非科举出身，同时其人缺乏文才，这样的人只适宜担任武职。
最终的结果是李三郎严拒了张说的提议，崔隐甫接任御史大夫，而张说举荐的崔日知则被任命为禁军将领。
由是，御史台三位主官崔隐甫、宇文融、李林甫都是贵族，都是靠门荫出仕，也都被公认为缺乏文才，他们组成了一个坚固的反张说同盟。
随后，这个同盟正式出手，三人联名弹劾张说“引术士占星，徇私僭侈，受纳贿赂”，天子李三郎接到弹章大为震怒，发金吾兵包围张说府邸，下敕由政事堂次相源乾曜会同刑部尚书韦抗、大理寺少卿胡珪及御史大夫崔隐甫等拘捕张说于御史台询问。
“砰砰砰”，宣阳坊小院儿的门被敲得山响，柳轻候从书房里出来打开门，见到的是满脸红光、满嘴酒气的杨崇义以及脸色上颇有些无奈的王缙。
杨崇义看到柳轻候后一把将他从门里拽出来，“今天高兴，走，醉梦楼喝酒去”
杨崇义用劲儿很大，根本就不容拒绝，柳轻候只能转身锁了门看向王缙。
王缙低声解释了几句，他本是陪着杨崇义在北里宴请京兆府中的客人，宴饮中听到些消息刺激的高兴异常，宴饮完毕不过瘾就跑到这儿来发酒疯了。
“什么消息能让杨行首高兴成这样？”
王缙左右看看后摇了摇头，“到醉梦楼再说”
柳轻候注意到一点异常，那就是跟杨崇义的兴奋不同，王缙今天总有些神思不属。
到底是为了什么事儿呢？