全球首次！時序大模型突破十億參數，華人團隊發布Time-MoE，預訓練數據達3000億個時間點

AIGC動態歡迎閱讀

原標題：全球首次！時序大模型突破十億參數，華人團隊發布Time-MoE，預訓練數據達3000億個時間點
關鍵字：模型,時序,序列,數據,領域
文章來源：新智元
內容字數：0字

內容摘要：

新智元報道編輯：LRST 好困
【新智元導讀】Time-MoE采用了創新的混合專家架構，能以較低的計算成本實現高精度預測。研發團隊還發布了Time-300B數據集，為時序分析提供了豐富的訓練資源，為各行各業的時間序列預測任務帶來了新的解決方案。在當今以數據為驅動的時代，時序預測已成為眾多領域不可或缺的核心組成。然而，構建一個兼具強大性能與高效運算的大規模時序預測模型始終是一個巨大的挑戰。此外，高質量的大型公共時間序列數據庫的匱乏進一步加劇了這一難題。
近日，由來自普林斯頓大學、格里菲斯大學等全球多地的華人國際科研團隊攜手通力合作，創新性地提出了一種基于混合專家架構（Mixture of Experts, MoE）的時間序列基礎模型Time-MoE，首次將時間序列預訓練大模型的參數規模推向十億級別，在時序預測領域實現了里程碑式的突破。論文鏈接：https://arxiv.org/pdf/2409.16040
代碼鏈接：https://github.com/Time-MoE/Time-MoE
與此同時，團隊精心整理了預訓練數據集Time-300B，這是目前時序領域最大的公開數據集，為各類

原文鏈接：全球首次！時序大模型突破十億參數，華人團隊發布Time-MoE，預訓練數據達3000億個時間點

聯系作者

文章來源：新智元
作者微信：
作者簡介：