國產(chǎn)千卡千億模型訓(xùn)練平臺落地:70B到130B大模型訓(xùn)練,線性加速比達91%
AIGC動態(tài)歡迎閱讀
原標(biāo)題:國產(chǎn)千卡千億模型訓(xùn)練平臺落地:70B到130B大模型訓(xùn)練,線性加速比達91%
關(guān)鍵字:線程,模型,集群,元宇宙,中心
文章來源:量子位
內(nèi)容字?jǐn)?shù):5611字
內(nèi)容摘要:
允中 發(fā)自 凹非寺量子位 | 公眾號 QbitAI國內(nèi)首個以國產(chǎn)全功能GPU為底座的大規(guī)模算力集群,正式落地了!
這便是來自摩爾線程的KUAE智算中心,全國產(chǎn)千卡千億模型訓(xùn)練平臺。
摩爾線程CEO張建中在主題演講中帶來重磅發(fā)布,包括大模型智算加速卡MTT S4000,以及專為千億參數(shù)大模型訓(xùn)練和推理提供強大支持的摩爾線程KUAE平臺,他表示:
摩爾線程KUAE智算中心的正式啟用,是公司發(fā)展的重要里程碑。
摩爾線程構(gòu)建了從芯片到顯卡到集群的智算產(chǎn)品線,依托全功能GPU的多元計算優(yōu)勢,旨在滿足不斷增長的大模型訓(xùn)練和推理需求,以綠色、安全的智能算力,大力推動AIGC、數(shù)字孿生、物理仿真、元宇宙等多模態(tài)應(yīng)用的落地和千行百業(yè)的高質(zhì)量發(fā)展。
與此同時,摩爾線程聯(lián)合國內(nèi)眾多合作伙伴發(fā)起并成立了摩爾線程PES -KUAE智算聯(lián)盟和摩爾線程PES-大模型生態(tài)聯(lián)盟,共同夯實從智算基礎(chǔ)設(shè)施到大模型訓(xùn)練與推理的國產(chǎn)大模型一體化生態(tài),持續(xù)為我國大模型產(chǎn)業(yè)發(fā)展加速。
MTT S4000:訓(xùn)推兼顧,專為大模型打造摩爾線程大模型智算加速卡MTT S4000,采用第三代MUSA內(nèi)核,單卡支持48GB顯存和768GB/s
原文鏈接:國產(chǎn)千卡千億模型訓(xùn)練平臺落地:70B到130B大模型訓(xùn)練,線性加速比達91%
聯(lián)系作者
文章來源:量子位
作者微信:QbitAI
作者簡介:追蹤人工智能新趨勢,關(guān)注科技行業(yè)新突破
相關(guān)文章
