小米AI大模型曝光 同參數量級排第一
【大公報訊】由清華大學、上海交通大學和愛丁堡大學合作構建的中文語言模型綜合性考試評估榜單C-Eval上,小米(01810)的大模型「MiLM-6B」首次曝光。
內媒引述小米相關負責人回應,小米一直積極布局大模型,已取得一些階段性成績,近期將會同步相關進展。
截至目前,「MiLM-6B」在C-Eval總榜單排名第十、同參數量級排名第一,在中文大模型基準「CMMLU」上,「MiLM-6B」排名第一。
在C-Eval評估中,「MiLM-6B」平均得分60.2,在STEM、社會科學、人文科學和其他等不同學科和難度級別中,得分介乎42至71.7。在CMMLU評估中,「MiLM-6B」在zero-shot平均分為60.37,在five-shot測試平均分有57.17。