百度開源文心 5.5 Flash,總參數 2800 億
ChainCatcher 消息,百度開源文心 ERNIE-5.5-Flash-Base 模型權重。繼 2025 年 6 月文心 4.5 系列之後,百度時隔約 16 個月再次開源千億參數級大模型,其間發布的文心 5.0 和 5.1 均未開源。文心 5.5 Flash 主打推理效率,總參數 2800 億,每生成一個 Token 僅激活 140 億參數,並使用 33.5 萬億 Token 從零預訓練。該模型支持最高 100 萬 Token 推理上下文。百度重新設計了長文本處理機制,43 層網絡中有 37 層將每 128 個歷史 Token 壓縮成一條緩存記錄,另外 6 層保留對原始內容的精細檢索能力,以降低長文本處理的顯存和計算開銷。官方將其與 DeepSeek-V4-Flash-Base、騰訊 Hy3-preview-Base、小米 MiMo-V2.5-Base 進行統一評測,30 項基準測試中有 24 項排名第一。本次開放的是未經中訓練和後訓練的純文本 Base 模型,主要供開發者繼續進行領域微調、指令訓練和強化學習。百度表示,經過後訓練的文心 5.5 Flash 將隨後推出。許可證比上一代更嚴格,文心 4.5 採用 Apache 2.0 協議,5.5 Flash 改用自定義許可證,不授權在歐盟、英國和韓國使用;相關產品或服務過去連續 12 個月營收超過 5000 萬美元的,商用前必須另行獲得百度書面授權。