封面有數 | 全球最新開源模型排行公佈,多款中國造模型排名前列

封面新聞記者 歐陽宏宇

6月27日淩晨,AI模型領先平台“抱抱臉”(HuggingFace)公佈全球開源模型排行榜,多款中國造開源模型上榜。其中,阿里的Qwen2-72B超越社交巨頭Meta的Llama-3、法國大模型平台Mistralai的Mixtral等產品,成為開源模型排行榜第一名。李開複AI大模型公司零一萬物的Yi-1.5也榜上有名。

據介紹,本次模型評估旨在拋開評估集數據的基礎上,加大對開源模型的評估標題,以修正評估的效度。為此,此次評估使用了300塊H100對目前全球100多個主流開源大模型,在BBH、MUSR、MMLU-PRO、GPQA等基準測試集上進行了全新評估。

評估結果顯示,阿里最新開源的Qwen2-72B指令微調版本、Meta開源的Llama-3-70B指令微調版本,以及阿里的Qwen2-72B基礎版本排名前三。

Mistralai的Mixtral-8x22B指令微調版本排名第4;微軟最新開源的小參數模型Phi-3-Medium-4K 14B排名第五;零一萬物最新開源的Yi-1.5-34B-Chat版本排在了第六名。此外,大模型平台Cohere開源帶RAG功能的Command R+ 104B,曾經排名第一的英偉達開源的Smaug-72B-v0.1,在新的排行榜中位列第8名。

在分析人士看來,中國開源大模型在全球範圍處於領導者地位。Stability AI研究總監他尼什克表示,中國在開源大模型領域非常有競爭力,除了此次上榜的大模型,InternLM、Deepsseek等很多知名的開源模型,在同OpenAI、Anthropic等旗下著名閉源大模型平台比拚時也不落下風。