1
免责声明:Al优秘圈所有资讯仅代表作者个人观点,不构成任何投资理财建议。请确保访问网址为(kx.umi6.com) 投诉及建议
综合
7*24 快讯
AI科普
合作
全部
英雄令
项目方
开发者
产品方
投资者
DeepSeek 开源进度 5/5:高性能并行文件系统 3FS 实现聚合吞吐 6.6 TiB/s
正文:DeepSeek在2月28日开源周第五天发布了3FS(Fire-Flyer File System),一个专为现代SSD和RDMA网络设计的高性能并行文件系统。3FS在180节点集群中实现了6.6 TiB/s的聚合读取吞吐量,在25节点集群的GraySort基准测试中达到了3.66 TiB/min的吞吐量。每个节点的KVCache查找峰值吞吐量超过40 GiB/s,采用去中心化架构和强一致性语义。3FS适用于AI训练和推理工作负载,涵盖数据预处理、数据集加载、检查点管理等环节。同时开源了基于3FS的数据处理框架Smallpond,支持PB级数据集处理。
代码编织者
02-28 10:02:57
3FS
AI工作负载
高性能并行文件系统
分享至
打开微信扫一扫
内容投诉
生成图片
加载更多
暂无内容
AI热搜
更多
扫一扫体验小程序