多語言大模型新SOTA!Cohere最新開源Aya-23:支持23種語言,8B/35B可選
AIGC動態(tài)歡迎閱讀
原標(biāo)題:多語言大模型新SOTA!Cohere最新開源Aya-23:支持23種語言,8B/35B可選
關(guān)鍵字:模型,語言,數(shù)據(jù),任務(wù),英語
文章來源:新智元
內(nèi)容字?jǐn)?shù):0字
內(nèi)容摘要:
新智元報道編輯:LRS
【新智元導(dǎo)讀】Aya23在模型性能和語言種類覆蓋度上達(dá)到了平衡,其中最大的35B參數(shù)量模型在所有評估任務(wù)和涵蓋的語言中取得了最好成績。雖然LLM在過去幾年中蓬勃發(fā)展,但該領(lǐng)域的大部分工作都是以英語為中心的,也就是說,雖然模型的能力很強,但也僅限于英語、漢語等使用人數(shù)多的語言,在處理資源匱乏的語言時往往性能不佳。
想要破局多語言,兩個關(guān)鍵在于強大的多語言預(yù)訓(xùn)練模型以及足量的、涵蓋多種語言的指令訓(xùn)練數(shù)據(jù)。
為了解決上述問題,最近,加拿大的獨角獸AI公司Cohere開源了兩種尺寸(8B和35B)的多語言模型Aya23,其中Aya-23-35B在所有評估任務(wù)和涵蓋的語言中取得了最好成績。論文鏈接:
https://cohere.com/research/papers/aya-command-23-8b-and-35b-technical-report-2024-05-23
Aya-23-8B: https://huggingface.co/CohereForAI/aya-23-8B
Aya-23-35B: https://huggingface.co/CohereFo
原文鏈接:多語言大模型新SOTA!Cohere最新開源Aya-23:支持23種語言,8B/35B可選
聯(lián)系作者
文章來源:新智元
作者微信:AI_era
作者簡介:智能+中國主平臺,致力于推動中國從互聯(lián)網(wǎng)+邁向智能+新紀(jì)元。重點關(guān)注人工智能、機器人等前沿領(lǐng)域發(fā)展,關(guān)注人機融合、人工智能和機器人對人類社會與文明進化的影響,領(lǐng)航中國新智能時代。