「教科書(shū)級(jí)」數(shù)據(jù)能有多大作用？微軟超強(qiáng)小模型引熱議

AIGC動(dòng)態(tài)歡迎閱讀

原標(biāo)題：「教科書(shū)級(jí)」數(shù)據(jù)能有多大作用？微軟超強(qiáng)小模型引熱議

關(guān)鍵字：數(shù)據(jù),模型,論文,問(wèn)題,囧次元

文章來(lái)源：機(jī)器之心

內(nèi)容字?jǐn)?shù)：3655字

內(nèi)容摘要：機(jī)器之心報(bào)道編輯：小舟隨著大模型掀起新一輪 AI 熱潮，人們開(kāi)始思考：大模型的強(qiáng)大能力來(lái)源于什么？當(dāng)前，大模型一直在由不斷增加的「大數(shù)據(jù)」來(lái)推動(dòng)。「大模型 + 大數(shù)據(jù)」似乎已經(jīng)成為構(gòu)建模型的標(biāo)準(zhǔn)范式。但隨著模型規(guī)模和數(shù)據(jù)量的不斷增長(zhǎng)，算力的需求會(huì)迅速膨脹。一些研究者嘗試探索新思路。6 月，微軟發(fā)布了一篇題為《Textbooks Are All You Need》的論文，用規(guī)模僅為 7B token…

原文鏈接：點(diǎn)此閱讀原文：「教科書(shū)級(jí)」數(shù)據(jù)能有多大作用？微軟超強(qiáng)小模型引熱議

聯(lián)系作者

文章來(lái)源：機(jī)器之心

作者微信：almosthuman2014

作者簡(jiǎn)介：專業(yè)的人工智能媒體和產(chǎn)業(yè)服務(wù)平臺(tái)