当初,张说、张嘉贞、李元纮、杜暹相继担任宰相执掌朝政,源乾曜为人清廉谨慎,常常把事情让给张说等人去决定,自己只是唯唯诺诺签名同意而已。李元纮、杜暹商议事情意见经常不同,于是就有了矛盾。他们轮流在秦献武帝面前说对方的不是,秦献武帝对此很不高兴,成文治武十六年(729年)六月十五日,秦献武帝将黄门侍郎、同平章事杜暹降职为荆州长史,中书侍郎、同平章事李元纮降职为曹州刺史,罢免了源乾曜兼任的侍中,让他只担任左丞相;秦献武帝任命户部侍郎宇文融为黄门侍郎,兵部侍郎裴光庭为中书侍郎,一并任同平章事;秦献武帝任命萧嵩为中书令,让他遥遥兼任河西节度使。