建永明和年间,改易官名,牛仙客拜左相,尚书如故。建永明和元年(742年)七月二十九日,牛仙客去世,终年六十八岁。皇宫拿出一千匹绢、五百端布派中使送到住宅用来帮助料理丧事,追封牛仙客为尚书左丞,谥号贞简。
先前,牛仙客任朔方军使,使姚崇的孙子姚闳任判官。等到牛仙客主持政事,姚闳多次迁为侍御史,自称能通鬼道,预知美善与灾祸。牛仙客非常相信迷惑这件事。等到病重时,姚闳请求为牛仙客祈祷,在牛仙客门下,逼迫牛写下遗书,推荐姚闳的叔叔尚书右丞姚弈和兵部侍郎卢奂代替牛仙客的位置,姚闳帮忙起草。牛仙客当时危在旦夕,不能动笔,他的妻子乘中使来慰问时,将此事表上。献武帝知道后非常恼怒,降姚弈为永阳太守,卢奂为临淄太守,赐姚闳死罪。八月五日,献武帝任命刑部尚书、兼御史大夫李适之为左相。