BTC $79,622.87 -0.83%
ETH $2,297.94 -1.56%
BNB $737.68 +0.16%
XRP $1.29 -0.84%
SOL $100.93 -0.08%
TRX $0.3305 +0.46%
DOGE $0.0767 -0.07%
ADA $0.2033 -0.39%
BCH $276.25 +1.36%
LINK $11.41 +0.15%
HYPE $77.26 +1.00%
AAVE $135.21 -0.71%
SUI $0.9101 -0.42%
XLM $0.1690 +0.07%
ZEC $1,223.52 +1.36%
AAPL $342.10 -1.30%
AMZN $248.85 +0.00%
GOOGL $319.62 -0.52%
MSFT $524.16 +0.10%
META $634.77 -1.10%
NVDA $216.07 +1.68%
TSLA $393.58 +5.98%
SNDK $1,269.27 +1.96%
INTC $87.89 +1.10%
SPCX $146.13 -1.48%
MU $901.09 +1.17%
AMD $523.58 +0.33%
BTC $79,622.87 -0.83%
ETH $2,297.94 -1.56%
BNB $737.68 +0.16%
XRP $1.29 -0.84%
SOL $100.93 -0.08%
TRX $0.3305 +0.46%
DOGE $0.0767 -0.07%
ADA $0.2033 -0.39%
BCH $276.25 +1.36%
LINK $11.41 +0.15%
HYPE $77.26 +1.00%
AAVE $135.21 -0.71%
SUI $0.9101 -0.42%
XLM $0.1690 +0.07%
ZEC $1,223.52 +1.36%
AAPL $342.10 -1.30%
AMZN $248.85 +0.00%
GOOGL $319.62 -0.52%
MSFT $524.16 +0.10%
META $634.77 -1.10%
NVDA $216.07 +1.68%
TSLA $393.58 +5.98%
SNDK $1,269.27 +1.96%
INTC $87.89 +1.10%
SPCX $146.13 -1.48%
MU $901.09 +1.17%
AMD $523.58 +0.33%

DeepSeek 开源并发布 3FS,高速并行文件系统优化 AI 数据访问

2025-02-28 09:15:15

ChainCatcher 消息,据 DeepSeek 公告,在开源周第五天,其 Fire-Flyer 文件系统(3FS)正式开源,作为一款高性能并行文件系统,3FS 可充分利用现代 SSD 和 RDMA 网络,实现高速数据访问,提升 AI 模型训练与推理效率。

3FS关键性能指标:

  • 在 180 节点集群中实现 6.6 TiB/s 总读取吞吐量
  • 在 25 节点 GraySort 基准测试中达到 3.66 TiB/分钟吞吐量
  • 单节点 KVCache 查询峰值吞吐量超 40+ GiB/s

3FS采用分离式架构,支持数据预处理、数据集加载、检查点存储/恢复、嵌入向量搜索及推理 KVCache 查询,具备强一致性语义。DeepSeek 同步推出 Smallpond 数据处理框架,进一步优化 3FS 数据管理能力。

app_icon
ChainCatcher 与创新者共建Web3世界