AIGC動態歡迎閱讀
原標題:Scaling Law撞墻,AI圈炸鍋了!OpenAI旗艦Orion被曝遭遇瓶頸,大改技術路線
關鍵字:報告,模型,知識產權,人工智能,數據
文章來源:人工智能學家
內容字數:0字
內容摘要:
來源:機器學習研究組訂閱
怎么回事,大模型Scaling Law也撞墻了?
幾天前,Sam Altman在YC獨家專訪中大膽預言,2025年AGI降臨,并期待在同年要一個孩子。沒想到,The Information緊接著的一份獨家爆料,直接打臉Altman:
GPT系列模型改進緩慢,OpenAI正在轉變策略,另謀出路。
據稱,下一代旗艦模型Orion并不像前代實現巨大的飛躍,雖然性能會超越OpenAI現有模型,但相較于從GPT-3到GPT-4的迭代,改進幅度要小得多。
不僅如此,這種提升也基本局限在了語言能力上——Orion的代碼能力甚至不如舊模型,但成本卻更高。
這篇文章直擊OpenAI痛點,提出Scaling Law逐漸放緩,原因之一是高質量文本數據越來越少。
為此,OpenAI成立專門的基礎團隊,去研究如何解決訓練數據匱乏問題改進模型,以及Scaling Law還能適用多久。
一時間,全網掀起了熱議——對LLM能否通向AGI的質疑聲此起彼伏。
向來都在唱衰的NYU教授馬庫斯,更是直接單方面宣布「勝利」:游戲結束,我贏了!
馬庫斯:我早就說過,GPT正在陷入收益遞減階段
為了扭轉這
原文鏈接:Scaling Law撞墻,AI圈炸鍋了!OpenAI旗艦Orion被曝遭遇瓶頸,大改技術路線
聯系作者
文章來源:人工智能學家
作者微信:
作者簡介:
? 版權聲明
文章版權歸作者所有,未經允許請勿轉載。
相關文章
暫無評論...