MiniMax 基于 Apache Doris 升級日志系統，PB 數據秒級查詢響應技術實踐

AIGC動態歡迎閱讀

原標題：MiniMax 基于 Apache Doris 升級日志系統，PB 數據秒級查詢響應技術實踐
關鍵字：日志,數據,系統,架構,模型
文章來源：AI前線
內容字數：0字

內容摘要：

作者｜MiniMax 基礎架構研發工程師 Koyomi、香克斯、Tinker 導讀：早期 MiniMax 基于 Grafana Loki 構建了日志系統，在資源消耗、寫入性能及系統穩定性上都面臨巨大的挑戰。為此 MiniMax 開始尋找全新的日志系統方案，并基于 Apache Doris 升級了日志系統，新系統已接入 MiniMax 內部所有業務線日志數據，數據規模為 PB 級， 整體可用性達到 99.9% 以上，10 億級日志數據的檢索速度可實現秒級響應。
MiniMax 是領先的通用人工智能科技公司，自主研發了不同模態的通用大模型，其中包括擁有萬億參數的 MoE 文本大模型、語音大模型以及圖像大模型。MiniMax 以“與用戶共創智能”為愿景，通過對大模型持續迭代，MiniMax 在國內率先完成核心 MoE 算法技術路線的突破。2024 年 4 月，公司推出國內首個上線商用的 MoE 架構、包含萬億參數的大語言模型——“MiniMax-abab 6.5”，模型性能接近國際領先水平。
隨著模型復雜度以及模型調用量的不斷提升，模型訓練及推理產生的運行日志也在激增，這些數據對于 AI

原文鏈接：MiniMax 基于 Apache Doris 升級日志系統，PB 數據秒級查詢響應技術實踐

聯系作者

文章來源：AI前線
作者微信：
作者簡介：