而就在梁硕被鸩酒杀害之后，又有胡人巫者对李轨道：“上天要派玉女从天而降，请求陛下建高台迎接玉女！”

那时李轨正打算要称帝，所以这种无稽之谈，正迎合了他的心境，李轨便相信了胡人巫者所言，立即下令征百姓建高台迎接玉女，花费很多人力无力，以致民生激怨。

而最近这几个月以来，河西闹了严重的饥荒，已到了人相食的地步，李轨用了全部国库家财救济饥民，仍然不够，每天都有许多百姓饿死，便想分发仓库中的粮食，于是召群臣商议。

曹珍等人都道：“国家当以百姓为根本，怎么可以舍不得仓里的粮食，而眼看着老百姓饿死呢？此时何须商议？”

太仆卿谢统师、太府卿韦士政等人都是隋朝的官员，心里始终不服曹珍等李轨起兵时的旧部，时常秘密地与诸胡结为团伙，排挤李轨的旧部下。

所以但凡是曹珍等人提议的，谢统师、韦士政这些隋朝旧部都会提出反对之言。

于是这时在曹珍刚说完话后，谢统师立即大骂道：“老百姓饿死的是因为他自己瘦弱，健壮的人怎么也饿不死。国家仓里的粮食是用来防备意外的，怎么可以用来喂那些瘦弱的人！仆射大人如果要讨好人情，不为国家打算，就不是忠臣。”

谢统师说的，完全就是毫无道理的诡辩，但李轨这时却觉得谢统师说得似乎很有道理，于是反而采纳了谢统师的意见。

从那之后，就连曹珍这些李轨起兵时的旧部官员，也都对李轨产生了离心与怨恨。

在以上发生的诸多事件、因素影响之下，李轨的西凉政权在兵力上虽依旧雄厚无比，但实则已像是一个得了重病的壮汉一般，已非势力初成的时候可比了。

当安兴贵得到李隐的请求，让他出力相助大唐攻略河西之地后，安兴贵二话不说就答应了，还主动向李渊请求立即启程去说服李轨，对他讲明大势祸福。

李渊对此表示怀疑的道：“李轨依仗军队凭借险要，连结突厥，实力非同小可，哪里是一番口舌就可以拿下的？”

安兴贵却回答：“臣前去说服李轨，李轨能听我的话固然好，如果不听，臣便率领家将起兵，与晋王的大军来个里应外合！”

李渊听后，这才答应让安兴贵返回河西之地。

安兴贵得到李渊的允许后，便立即星夜启程，当李隐的大军还在半路的时候，安兴贵便到达了武威。

李轨对安兴贵弃唐归凉的行为感到很是高兴，于是任命他为左右卫大将军。

安兴贵找了机会劝李轨道：“凉国的辖地不过千里，土地瘠薄百姓贫困。如今大唐从太原兴起，夺取了函秦，统制中原，战必胜，攻必取，这大概是天意，不是人力能做到的。陛下不如带整个河西归附唐，那么汉代窦融的功勋又可以在今天重现了！”