玄宗闻言，心里大为不快。
敢情那天跟自己同登泰山的所谓“礼官”，都是张说的亲党啊？这不是明目张胆地以权谋私吗？
由此，玄宗对张说的倚重和信任之情大打折扣。
自从封禅归来，张说表面上还是那个风光无限的首席宰相，其实明眼人不难发现——张说已经失去天子的信任了。
开元十四年二月发生的一件事，足以证明张说的失宠。
当时，玄宗征召河南尹崔隐甫入朝，准备授予他御史大夫的要职。张说认为此人粗鄙无文，便奏请玄宗改任其为金吾大将军，同时推荐了另一个人选。
这个人就是几年前因贪赃受贿而遭贬谪的崔日知，据说与张说私交甚笃。
张说的奏章呈上后，玄宗愤怒了。
好你个张说！朕看中的人你认为粗鄙，可你自己推荐的又是什么货色？一个品行不端的腐败官员！就因为和你张说是好友，你就敢公然推荐他担任御史大夫。御史大夫是什么官？是监察百官的官！一个连自己品行都有问题的官，又如何监察百官？朕把中书令的大权交到你张说手上，难道就是让你这么干的？