訊飛星辰是科大訊飛推出的AI大模型定制訓練平臺，旨在幫助用戶創建專屬的定制大模型。它匯集了20多種行業內知名的優質模型，如星火大模型和Llama3，支持零代碼微調，大大降低了大模型精調的門檻。該平臺涵蓋了數據管理、模型微調、評估、托管和推理服務，提供了大模型的全生命周期管理，廣泛應用于內容創作、代碼生成、邏輯推理等多個場景。

訊飛星辰是什么

訊飛星辰是科大訊飛推出的一款AI大模型定制訓練平臺，專為用戶量身打造獨特的大模型。它匯集了20多種行業領先的優質模型，如星火大模型、Llama3等，支持零代碼微調，旨在降低大模型精調的門檻。訊飛星辰圍繞數據管理、模型微調、評估、托管及推理服務，提供全方位的大模型生命周期管理，覆蓋內容創作、代碼、邏輯推理等多種應用場景。

訊飛星辰在模型和數據集的豐富性、功能特性上進行了全新升級，增強了數據工程能力，支持多種數據集格式，并提供高級參數配置，以滿足專業開發者的需求。

訊飛星辰的主要功能

• 模型微調與部署
  • 模型集成：提供20多個行業知名的優質模型，如訊飛星火、Llama3、SD-XL等。
  • 開源模型精調：引入書生系列、Qwen2.5系列等多款開源模型進行精調。
  • 新增模型：推出Spark Max、Spark Mini、Spark Tiny等自研模型，以適應不同業務場景的需求。

• 數據集構建與管理
  • 數據工程能力：通過問答抽取、數據增強、prompt工程等手段，構建全方位的數據工程能力。
  • 數據集格式支持：支持多種數據集格式，包括ShareGPT、Alpaca等，實現對主流數據集格式的兼容。
  • 自動拆分測試集：平臺可從訓練集中自動拆分出一定比例的數據作為測試集，便于在訓練完成后進行驗證，展示微調效果。
  • 批量推理：支持最多10個模型同時在線進行批量推理，大幅提高數據處理效率，適合需要處理大量數據的場景。

• 功能特性升級
  • 兼容性與遷移支持：兼容OpenAI協議，依賴OpenAI API的企業能無縫遷移到國產大模型，實現技術過渡。
  • 功能增強與擴展：支持function_call精調訓練，調用外部工具，增強大語言模型的功能。
  • 模型訓練與評估：支持展示Loss曲線，實時監控模型訓練效果，動態調整訓練策略，并通過裁判員模型評判效果。
  • 高級參數配置：支持分詞長度、Lora Merge、UnSloth等特性配置。
• API矩陣：構建豐富且高性價比的API矩陣，提供多版本API服務，如Spark Pro、Ultra和Max版本，支持不同長度的上下文和Batch版本API。

如何使用訊飛星辰

• 注冊與登錄：訪問訊飛星辰的官方網站，創建賬戶或使用現有賬戶登錄。
• 了解平臺服務：瀏覽平臺提供的各項服務和功能，了解不同模型的特點及適用場景。
• 選擇模型：根據業務需求選擇合適的預訓練模型，訊飛星辰提供多種模型，包括星火系列、Llama3等。
• 數據準備：準備或選擇合適的數據集進行微調，平臺支持多種數據集格式，并提供數據增強等工具以構建高質量數據集。
• 模型微調：使用提供的工具對所選模型進行微調，包括上傳數據集、配置微調參數等步驟。
• 模型評估：利用評估工具對微調后的模型進行效果評估，例如查看Loss曲線及裁判員模型的效果對比。
• 模型部署：將訓練好的模型部署到實際應用中，訊飛星辰支持模型托管與推理服務，便于快速部署。
• API調用：如有需要，可基于訊飛星辰提供的API進行模型調用，實現模型服務的集成。

訊飛星辰的應用場景

• 邏輯推理：構建基于邏輯推理的智能問答系統，為用戶提供決策支持，快速獲取信息和解決方案。
• 數據管理：通過自動化的數據標注和清洗，提高數據準備的效率和質量，為AI模型訓練提供堅實的數據基礎。
• 模型微調與評估：根據不同業務需求定制AI模型，通過微調和評估優化模型性能，適應具體的應用場景。
• 托管與推理服務：將訓練好的AI模型部署到云端或邊緣設備，提供穩定可靠的在線推理服務，支持高并發請求。
• 多模態應用：訓練并構建多模態應用，在圖像和語音識別領域，提供智能分析和處理能力，如自動識別圖像內容及將語音轉換為文本。