AIGC動(dòng)態(tài)歡迎閱讀

原標(biāo)題：Mistral攜微軟引爆「小語(yǔ)言模型」潮！Mistral中杯代碼能力完勝GPT-4，成本暴降2/3

關(guān)鍵字：代碼,模型,成本,微軟,能力

文章來(lái)源：新智元

內(nèi)容字?jǐn)?shù)：2747字

內(nèi)容摘要：新智元報(bào)道編輯：Aeneas【新智元導(dǎo)讀】小模型的風(fēng)潮，最近愈來(lái)愈盛，Mistral和微軟分別有所動(dòng)作。而網(wǎng)友實(shí)測(cè)發(fā)現(xiàn)，Mistral-medium的代碼能力竟然完勝了GPT-4，而所花成本還不到三分之一。最近，「小語(yǔ)言模型」忽然成為熱點(diǎn)。本周一，剛剛完成4.15億美元融資的法國(guó)AI初創(chuàng)公司Mistral，發(fā)布了Mixtral 8x7B模型。這個(gè)開(kāi)源模型盡管尺寸不大，小到足以在一臺(tái)內(nèi)存100GB以上的電腦上運(yùn)行，然而在某些基準(zhǔn)測(cè)試中卻能和GPT-3.5打平，因此迅速在開(kāi)發(fā)者中贏得了一片稱(chēng)贊。之所以叫Mixtral 8x7B，是因?yàn)樗Y(jié)合了為處理特定任務(wù)而訓(xùn)練的各種較小模型，從而提高了運(yùn)行效率。這種「稀疏專(zhuān)家混合」模型并不容易實(shí)現(xiàn)，據(jù)說(shuō)OpenAI在今年早些時(shí)候因?yàn)闊o(wú)法讓MoE模型正常運(yùn)行，而不得不放棄了模型的開(kāi)發(fā)。緊接著，就在第二天，微軟又發(fā)布了全新版本的Phi-2小模型。跟Mistral…

原文鏈接：點(diǎn)此閱讀原文：Mistral攜微軟引爆「小語(yǔ)言模型」潮！Mistral中杯代碼能力完勝GPT-4，成本暴降2/3

聯(lián)系作者

文章來(lái)源：新智元

作者微信：AI_era

作者簡(jiǎn)介：智能+中國(guó)主平臺(tái)，致力于推動(dòng)中國(guó)從互聯(lián)網(wǎng)+邁向智能+新紀(jì)元。重點(diǎn)關(guān)注人工智能、機(jī)器人等前沿領(lǐng)域發(fā)展，關(guān)注人機(jī)融合、人工智能和機(jī)器人對(duì)人類(lèi)社會(huì)與文明進(jìn)化的影響，領(lǐng)航中國(guó)新智能時(shí)代。