訓練兩個小時需要半個小時保存數據,如何破局?|甲子光年
AIGC動態(tài)歡迎閱讀
原標題:訓練兩個小時需要半個小時保存數據,如何破局?|甲子光年
關鍵字:華為,數據,模型,報告,閃存
文章來源:甲子光年
內容字數:0字
內容摘要:
AI時代存儲需要更優(yōu)解。作者|王博
“中國的數字化應用進程發(fā)展是很快的,但在數字基礎設施這一塊的創(chuàng)新是欠缺的,存、算、網要協(xié)同發(fā)展。”
在華為全聯(lián)接大會2024期間,華為公司副總裁、數據存儲產品線總裁周躍峰在一場媒體群訪結束后,特意對現場的媒體人說了這樣一句話。
計算和存儲都是數字基礎設施中的重要組成部分,計算會像“機器印刷文字”一樣生成大量token(詞元),而存儲就是“紙張”。大模型時代,越來越大規(guī)模的算力要求數據存儲提供更高性能的數據訪問,這和“印刷機速度更快了,紙張的質量和供應速度也要跟上”是一個道理。
國家互聯(lián)網信息辦公室在今年9月8日發(fā)布的《國家信息化發(fā)展報告(2023年)》顯示,我國算力基礎設施綜合水平穩(wěn)居全球第二,截至2023年底,提供算力服務的在用機架數達810萬標準機架,算力總規(guī)模超230EFLOPS。
但是,單純的數據算力無法單方面支撐整個數據中心的運營,還需要相匹配的數據存儲容量。
在數字基礎設施領域有一個“通用計算存算比”的概念,通過計算數據存儲容量和數據算力體量之比,來評估數據中心建設的平衡性,避免因為存力的短缺造成算力的浪費而影響數據處理中的效率。
各國通
原文鏈接:訓練兩個小時需要半個小時保存數據,如何破局?|甲子光年
聯(lián)系作者
文章來源:甲子光年
作者微信:
作者簡介:
? 版權聲明
文章版權歸作者所有,未經允許請勿轉載。
相關文章
暫無評論...