DeepSeek开源周最后一天:让数据处理「从自行车升级到高铁」

DeepSeek 开源了高性能并行文件系统3FS,实现了高吞吐量和强一致性,支持AI训练和推理工作负载。它利用现代SSD和RDMA网络提供共享存储层,具有分离式架构、强一致性和无状态元数据服务等优势。

DeepSeek开源第五弹:3FS & Smallpond 颠覆性数据处理神器登场,PB级数据轻松处理

刚刚 DeepSeek开源周最后一个开源日推出数据处理神器:3FS和Smallpond。3FS是一款高性能分布式文件系统,提供卓越的读取吞吐量。Smallpond是基于DuckDB和3FS的数据处理框架,旨在简化PB级数据处理流程并充分利用DuckDB高性能分析能力。