BTC $79,007.16 -0.81%
ETH $2,482.54 -0.06%
BNB $739.47 -1.05%
XRP $1.40 -1.15%
SOL $103.83 -1.91%
TRX $0.3338 -0.43%
DOGE $0.0900 +1.10%
ADA $0.2202 +0.89%
BCH $265.22 +3.45%
LINK $12.92 +5.08%
HYPE $85.41 -2.91%
AAVE $131.76 -1.14%
SUI $0.8147 +1.95%
XLM $0.1918 +4.15%
ZEC $1,158.34 -2.11%
BTC $79,007.16 -0.81%
ETH $2,482.54 -0.06%
BNB $739.47 -1.05%
XRP $1.40 -1.15%
SOL $103.83 -1.91%
TRX $0.3338 -0.43%
DOGE $0.0900 +1.10%
ADA $0.2202 +0.89%
BCH $265.22 +3.45%
LINK $12.92 +5.08%
HYPE $85.41 -2.91%
AAVE $131.76 -1.14%
SUI $0.8147 +1.95%
XLM $0.1918 +4.15%
ZEC $1,158.34 -2.11%

DeepSeek 開源並發布 3FS,高速並行文件系統優化 AI 數據訪問

2025-02-28 09:15:15

ChainCatcher 消息,据 DeepSeek 公告,在開源週第五天,其 Fire-Flyer 文件系統(3FS)正式開源,作為一款高性能並行文件系統,3FS 可充分利用現代 SSD 和 RDMA 網絡,實現高速數據訪問,提升 AI 模型訓練與推理效率。

3FS關鍵性能指標:

  • 在 180 節點集群中實現 6.6 TiB/s 總讀取吞吐量
  • 在 25 節點 GraySort 基準測試中達到 3.66 TiB/分鐘吞吐量
  • 單節點 KVCache 查詢峰值吞吐量超 40+ GiB/s

3FS採用分離式架構,支持數據預處理、數據集加載、檢查點存儲/恢復、嵌入向量搜索及推理 KVCache 查詢,具備強一致性語義。DeepSeek 同步推出 Smallpond 數據處理框架,進一步優化 3FS 數據管理能力。

app_icon
ChainCatcher 與創新者共建Web3世界