人工智能

DeepSeek开源周第五天:“动力推进器”Fire-Flyer文件系统

字号+作者:凤凰网科技 来源:凤凰网科技 2025-02-28 09:46 评论(创建话题) 收藏成功收藏本文

2月28日,DeepSeek“开源周”第五天,今天开源的是一款为所有DeepSeek数据访问提供动力的推进器,名为3FS。Fire-Flyer文件系统(3FS)——一个并行文件系统,充分'...

2月28日,DeepSeek“开源周”第五天,今天开源的是一款为所有DeepSeek数据访问提供动力的推进器,名为3FS。Fire-Flyer文件系统(3FS)——一个并行文件系统,充分利用现代SSD和RDMA网络的带宽。180节点集群中,聚合读取吞吐量达6.6TiB/s;25节点集群中,GraySort基准测试吞吐量达3.66TiB/min。rY4品论天涯网

单客户端节点的KVCache查找峰值吞吐量超过40GiB/s;采用强一致性语义的分离式架构;支持V3/R1中的训练数据预处理、数据集加载、检查点保存/重载、嵌入向量搜索及推理中的KVCache查找。rY4品论天涯网

DeepSeek表示,3FS旨在为DeepSeek的数据密集型任务提供高效、可靠的存储与访问解决方案,助力AI研究与开发。rY4品论天涯网

rY4品论天涯网

本网除标明“PLTYW原创”的文章外,其它文章均为转载或者爬虫(PBot)抓取; 本文只代表作者个人观点,不代表本站观点,仅供大家学习参考。本网站属非谋利性质,旨在传播马克思主义和共产主义历史文献和参考资料。凡刊登的著作文献侵犯了作者、译者或版权持有人权益的,可来信联系本站删除。 本站邮箱service@pltyw.com

23
扫二维码添加收藏返回顶部