IDC最新報告,7大維度11家大模型廠商比拼,唯一全優(yōu)是誰?
AIGC動態(tài)歡迎閱讀
原標題:IDC最新報告,7大維度11家大模型廠商比拼,唯一全優(yōu)是誰?
關(guān)鍵字:報告,模型,能力,維度,廠商
文章來源:機器之心
內(nèi)容字數(shù):0字
內(nèi)容摘要:
機器之心原創(chuàng)
作者:陳萍、小舟如果考試題太簡單,學渣也能拿一百昏。在 AI 圈,我們應該拿怎樣的「試卷」來檢驗一直處于流量 C 位的大模型的真實水平?是高考題嗎?當然不是!
也有些人認為,在各種 Benchmark 榜單上,誰排第一誰最強。
其實并非如此,有時候,越「權(quán)威」的榜單就越容易被策略性刷榜。
因此,模型的「強」不能只是在某個 Benchmark 上排名第一,而是要在多個維度上都很能打。
近日,全球領先的國際數(shù)據(jù)公司(IDC) 最新發(fā)布的大模型實測報告《中國大模型市場主流產(chǎn)品評估,2024》從基礎能力到應用能力 7 大維度對 11 家大模型廠商的 16 款市場主流產(chǎn)品進行實測。
報告顯示,百度文心大模型整體競爭力位于領先水平,產(chǎn)品能力處于第一梯隊,是唯一一家在 7 大維度上均為優(yōu)勢廠商的企業(yè)。文心一言、文心一格在問答理解類、推理類、創(chuàng)作表達類、數(shù)學類、代碼類等基礎能力,toC 通用場景類、toB 特定行業(yè)類等應用能力等 7 大維度均具備領先優(yōu)勢。其他評測廠商中,阿里獲 6 項優(yōu)勢維度,OpenAI GPT-4 和商湯分獲 5 項。IDC《中國大模型市場主流產(chǎn)品評估,2024》
原文鏈接:IDC最新報告,7大維度11家大模型廠商比拼,唯一全優(yōu)是誰?
聯(lián)系作者
文章來源:機器之心
作者微信:almosthuman2014
作者簡介:專業(yè)的人工智能媒體和產(chǎn)業(yè)服務平臺