deepseek-ai

3FS

deepseek-ai

A high-performance distributed file system designed to address the challenges of AI training and inference workloads.

AI 简介

3FS(Fire-Flyer File System)是一个面向AI训练与推理负载优化的高性能分布式文件系统。它采用解耦架构,融合数千块NVMe SSD与RDMA高速网络,提供强一致性(基于CRAQ协议)、标准POSIX文件接口及无状态元数据服务;支持高效数据预处理、随机样本加载、大规模并行检查点保存和KVCache持久化等关键AI工作流。适用于大模型训练集群、多节点推理服务及需要高吞吐、低延迟共享存储的AI基础设施场景。

C++
MIT License
10k
Stars
1.1k
Forks
89
Watchers
120
Issues

Star 增长

今日0
近 7 天0
近 30 天0
综合评分69.08
默认分支main