《AI熱潮》小米大模型首曝光,評測成績名列前茅

　　《經濟通通訊社11日專訊》小米(01810)大模型MiLM-6B近日現身C-Eval、CMMLU大模型評測榜單,參數規模為64億,目前在C-Eval總榜單排名第10、同參數量級排名第1,在CMMLU中文向大模型排名第1。

　　在C-Eval評估中,MiLM-6B的平均分為60.2。C-Eval數據集是一個全面的中文基礎模型評測數據集,涵蓋了52個學科和四個難度級別。

　　在CMMLU評估中,MiLM-6B在zero-shot(零樣本學習)和five-shot(五個樣本)測試中的平均分分別為60.37和57.17,表現出良好的知識和推理能力。CMMLU數據集專門用於評估語言模型在中文語境下的知識和推理能力,涵蓋從基礎學科到高級專業水平的67個主題。

　　小米總裁盧偉冰早前透露,今年4月正式組建了AI實驗室大模型團隊,AI領域相關人員超過1200人,並指小米不會研究通用大語言模型。小米AI實驗室主任王斌亦表示,小米不會單獨發布一款類ChatGPT產品,「也不會發布一個PPT,或者演示幾個例子,就說我們有大模型了」,自研大模型最終會由產品帶出來。(sl)