平心而论，元和初年的政治确实也并非无懈可击，表现在很多方面。比如，朝廷欲加强中央集权，必然要损害民众的利益，再加上朝中意见多少有些分歧，各派之间意气用事的情况也不少。但主要的症结是皇上对宦官的依赖和依靠并未减轻，权贵骄奢淫逸、宦官专横霸道的事情更是屡见不鲜。时任翰林学士的白居易就经常与皇帝争论，并且写作了大量的“讽喻诗”进闻于上。可见牛僧孺等人的言论倒也不是空穴来风。
此时，另一位宰相武元衡已奉诏接替高崇文出镇西川，当事者就只有郑絪和李吉甫。吉甫对外采取加强集权的强硬方针，对内必然也要有所动作，所以经常向朝士们表露对宦官们干预是非的不满，想不到皇甫湜居然就在策文中捅出来了。对他的直言不讳，吉甫表面上不动声色，内心却是十分赞成。
裴均指使人向皇上报告：“这全是出于执政宰相的唆使。”意思就是吉甫。
宪宗得知很生气，觉得李吉甫以此方式宣泄不满，有失为臣之道。幸亏不少谏官秘密上疏为吉甫申辩，皇上才稍稍改变了想法。但宫中的宦官对策文中强烈的攻击却是不能接受的，否则以后日子就不好过了。
刘光琦和吐谷承璀对皇上哭诉道：“裴垍、王涯负责策试的复核，而擢为上等的皇甫湜是王涯的外甥，王涯不先说明，裴垍又无所异同，选人惟亲，简直太不像话了！伏请陛下明察。”
皇上对身边的近侍一向是信任的，他还要依靠他们做他想做的事，见两人这么说，事实似乎也能成立，于是只好罢免了裴、王二人的翰林学士。接着，又贬王涯、韦贯之、杨于陵出京，对牛僧孺三人也不予升调，迫使他们不得不远赴藩府。本朝地方大镇可以自辟中下级属官，无须中央任命，所以士子在朝不得意者，往往入于幕府。后来有所谓“藩镇得人”之说，也就是这么来的。
皇上此举招致了很多议论，白居易就是坚决反对者之一。但不知怎么，吉甫仍然没有表态，甚至在处理牛僧孺三人的过程中，也一点都未表示过不同意见，更没采取他应该能够采取的缓解措施，或者做些解释。也许在他看来，这毕竟是一件小事，但吉甫做梦也想不到的是，他就此犯了他一生中一个不可饶恕的错误，在数十年后，有不少人把这件事的过错加到他身上去，由此给他的儿子--日后的一位杰出的宰相--酿生了一场重大的灾难。
