開元十三年，武宗賜死寵臣王守一。張嘉貞因與王守一交情深厚，也被貶為台州刺史。不久，張嘉貞又擔任工部尚書、定州刺史，掌管北平軍事，封河東侯。張嘉貞赴任時，武宗親自賦詩勉勵，並命百官到上東門外餞行。

官場原是大染缸。張說早已放棄操守，憑藉皇帝信任，結黨營私。武宗打算重用河南尹崔隱甫，結果在張說干涉下，任命他為御史大夫。崔隱甫對張說，暗暗嫉恨。張說雖有才智，但脾氣暴躁，生性貪財，對同僚經常當面駁斥，甚至呵斥謾罵，因此樹敵甚多。他與御史中丞宇文融不和，因此對宇文融所提出的建議，大多加以壓制。

不久，御史中丞李林甫和崔隱甫、宇文融一起上書武宗，彈劾張說勾引術士占星，徇私舞弊，收受賄賂。

軒轅勃平生最忌恨謀逆和貪汙。只要粘上這兩條都要嚴懲。對群臣保持高壓反腐態勢，是維護官場清廉的必要手段。武宗便命源乾曜與崔隱甫、刑部尚書韋抗、大理少卿明珪等人，一起在御史臺審訊張說，結果罪狀竟然大多屬實。

“張說啊張說，你辜負了朕！”武宗將張說打入獄中，嚴查其窩案黨羽。

左庶子張光，是張說哥哥，聽說弟弟被誣陷，於是在朝堂上割掉耳朵，哭著為張說鳴冤。“崔隱甫所指責的徇私舞弊，收受賄賂等，不盡屬實。且宰相之家，難免僱傭轎馬下人，開銷巨大，朝廷俸祿不足以維持生活，收受日常過節小額禮金在所難免。”

武宗聽說張光割耳鳴冤，遂命高力士，去大獄探視張說。

高力士來到大獄探視。張說頭髮散亂，滿臉汙垢，坐在稻草墊子上，用瓦盆吃冷飯。看到宮裡頭來了太監，驚慌恐懼，伏地等候處分。

高力士回來後，將獄中所見實情，稟報給武宗，又述說張說對朝廷的莫大功勞。“依奴才之見，張丞相雖有貪汙，但功大於罪。”

武宗於是赦免張說，僅罷免其中書令之職。不久，張說被起復，先為右丞相，又任左丞相。

張說被罷政事後，偃在集賢院專修國史。崔隱甫等上奏皇帝，“張說為戴罪之身，理應免去右丞相一職。”

武宗不許，並在遇到軍國大事時，仍舊派人去詢問張說意見。崔隱甫等怕武宗還會起復張說，暗懷恐懼。當年張柬之敬暉等一念仁慈，放過武家，結果反被武三思搞得身敗名裂，沒有好下場。權力鬥爭，原本就是你死我活。於是在皇帝面前，對張說百般詆譭。

當年瞾君不想殺來俊臣，但朝臣們都曰當殺。在滿朝文武和來俊臣之間，瞾君也只能毅然棄子。

武宗拗不過眾大臣，只好勒令張說致仕退休。又派宦官高力士私下裡傳話：好好休養，等風頭過去，寡人還會起用相國。

“朕想封你為隴右營田使，讓你去隴西經營屯田，牛兄意下如何？”

“陛下如有需要，牛仙客自當捨命效力。”

“隴西是關中的屏障，也是狼族經常蹂躪之地。派一般人前往，朕還不能放心。”

軒轅勃於是破格提拔牛仙客，為隴右營田使，與傅文靜共同治理隴右營田。

營田使的職務主要是開拓荒地，收取地租。牛仙客帶著牛頭族開墾荒地，播種麥豆，同時抵禦狼族的侵擾。

牛仙客因軍功累遷至洮州司馬。不久，河西節度使郭知運飲狼酒中毒，死於軍中，詔命王君毚代為河西節度使，牛仙客被授為節度判官。

開元十五年，河西遭到五色狼族聯合進攻，在一次夜襲中，將士大部戰死，節度使王君毚也被瀚海司馬白狼八大將百穀護輸撕成碎片。

牛仙客率領五千牛頭族蹄角鬥士，擊退五色狼族的聯合進攻。蕭嵩繼任河西節度使，仍將軍政事務託付給牛仙客。他工作勤勉，沒有野心，深得皇帝軒轅勃的信任。