Smallpond

DeepSeek在开源周发布了支持其V3/R1模型全生命周期的数据访问需求的核心基础设施——Fire-Flyer File System(3FS)和Smallpond数据处理框架。3FS具有高性能、高吞吐量以及强一致性等特性，在大型集群上实现了6.6 TiB/s的聚合读取吞吐量，并且在KVCache查找中的峰值吞吐量可达40+ GiB/s。Smallpond是建立在3FS之上的轻量级数据处理框架，旨在简化大规模数据处理任务。