首页 > 热点播报 > 正文

DeepSeek开源周第五天:3FS、用于所有DeepSeek数据访问的Thruster

据悉,DeepSeek发布了Fire-Flyer文件系统(3FS),该系统利用现代SSD和RDMA网络实现全带宽并行文件传输。该系统在180节点集群中实现了6.6TiB/s的聚合读取吞吐量,在25节点集群中完成GraySort基准测试,并达到每分钟3.66TiB的吞吐量。此外,每个客户端节点的KVCache查找峰值吞吐量超过40GiB/s,并具备强一致性语义分解架构。3FS可应用于V3/R1进行训练数据预处理、数据集加载、检查点保存/重新加载、嵌入向量搜索以及KVCache查找推理等任务

网友评论

24小时内最火资讯
热门IT产品
  1. ¥1699
    华为畅享90 Pro Max
    ·
  2. ¥4699
    HUAWEI Mate 80
    ·
  3. ¥5999
    苹果iPhone17
    ·
  4. ¥8999
    苹果iPhone17 Pro
    ·
  5. ¥2399
    iQOO Z11 Turbo
    ·
  6. ¥1999
    vivo Y600 Pro
    ·
  7. ¥3599
    荣耀500 Pro
    ·
  8. ¥3499
    一加Ace 6至尊版
    ·
  9. ¥1399
    荣耀X70
    ·
  10. ¥2199
    REDMI Turbo 5 Max
    ·