(相關資料圖)
近日,小米的大語言模型MiLM-6B首次亮相C-Eval、CMMLU兩大AI模型評測榜單。據悉,MiLM-6B在C-Eval總榜單中排名第10,同參數量級排名第1,而在CMMLU中文向大模型中則位列第1。C-Eval公布的數據顯示,MiLM-6B模型在各個測試科目中的平均成績表現良好。在STEM(科學、技術、工程和數學教育)的20個科目中,包括計量師、物理、化學、生物等多個項目都取得了較高的準確率。在10個社會科學科目中,除教育學和地理外,該模型在所有科目中都獲得了較為理想的準確率。在人文科學的11個科目中,MiLM-6B在歷史與法律基礎上也有著不錯的準確率表現。然而,盡管MiLM-6B模型在大多數科目中表現出了相對良好的準確度,但在法學、數學、編程、概率論、離散數學等科目上的表現仍有待提升。據了解,MiLM-6B是小米開發的一個大規模預訓練語言模型,參數規模為64億。