6月27日消息,全球知名的開源平臺Hugging Face的聯(lián)合創(chuàng)始人兼首席執(zhí)行官Clem在社交平臺激動宣布,阿里巴巴最新開源的Qwen2-72B指令微調(diào)版本在開源模型排行榜上榮登榜首。
為了打造一個更為公正和準確的開源大模型排名,Clem及其團隊利用300塊H100高性能硬件,對全球100多個主流開源大模型,包括Qwen2、Llama-3、Mixtral、Phi-3等,在BBH、MUSR、MMLU-PRO、GPQA等嚴格的基準測試集上進行了全面而深入的評估。
這次重新評估的初衷在于,許多開發(fā)者過于追求排行榜的名次,導致在模型訓練過程中過度依賴評估集數(shù)據(jù),并且過去的評估標準對于模型而言顯得過于簡單。因此,本次評估提高了難度標準,以檢驗這些模型在更高挑戰(zhàn)下的真實性能。
令人矚目的是,阿里巴巴開源的Qwen-2 72B模型在激烈競爭中脫穎而出,不僅超越了科技巨頭Meta的Llama-3,還超越了法國知名大模型平臺Mistralai的Mixtral,成為了新的行業(yè)領軍者。這一成績充分展示了中國在全球開源大模型領域的領導地位。
針對這一排名結(jié)果,Stability AI的研究總監(jiān)、早年在19歲便獲得博士學位的Tanishq表示,他早前就預測中國在開源大模型領域具有強大的競爭力。除了Qwen2,還有零一萬物、InternLM、Deepsseek等眾多優(yōu)秀的中國開源模型,都在國際舞臺上嶄露頭角。
Tanishq進一步強調(diào),任何關于中國在開源大模型領域落后的觀點都是站不住腳的。相反,中國在這一領域正逐漸展現(xiàn)出領導者的姿態(tài),引領著全球開源模型的發(fā)展潮流。
(圖片來源網(wǎng)絡侵刪)
發(fā)表評論