在DeepSeek开源周的第五天，DeepSeek正式发布了其高性能并行文件系统——Fire-Flyer文件系统（3FS）。这款文件系统专为满足现代人工智能（AI）和高性能计算（HPC）工作负载的需求而设计，支持大规模数据存储和高速数据访问。通过充分利用现代固态硬盘（SSD）和远程直接内存访问（RDMA）网络的全带宽，3FS为AI应用提供了一个高效的分布式存储方案。
3FS的性能指标令人印象深刻。在一个由180个节点组成的集群中，3FS实现了6.6 TiB/s的总读取吞吐量，而在25节点的GraySort基准测试中，吞吐量达到了每分钟3.66 TiB。这些数字远超传统存储解决方案，表明3FS在处理大规模数据时具有极强的能力，能够有效支持AI训练和数据处理的需求。尤其在处理大规模数据集时，这样的吞吐量能够大大缩短处理时间，提升整体效率。
不仅如此，3FS的KVCache功能也展现了其卓越的性能。在每个客户端节点上，KVCache的峰值吞吐量超过40 GiB/s，显著提升了数据查询和推理操作的速度。这个功能特别适合需要快速访问和实时响应的应用场景，能够有效减少硬件资源的压力，同时提高系统的总体性能。
3FS不仅仅在吞吐量和查询性能上表现出色，它的架构设计也值得关注。3FS采用了强一致性的分布式架构，确保数据在分布式环境中始终保持一致。这使得开发者可以更加专注于业务逻辑，而无需担心数据一致性的问题。此外，解耦架构进一步提高了系统的灵活性和可扩展性，使得3FS能够轻松应对不断增长的数据存储和处理需求。
对于AI和高性能计算领域的开发者来说，3FS在数据预处理、数据集加载、检查点存储与恢复、以及向量嵌入搜索等多个环节的支持，使得其成为一个全面的解决方案。它不仅能够为大规模训练提供稳定的数据支持，还能在推理过程中提供加速，有效提高AI应用的整体运行效率。
总体而言，3FS是一项面向未来的高性能分布式存储解决方案，能够解决AI训练和推理过程中的数据瓶颈问题，提升数据访问效率。
除了3FS本身的强大性能，DeepSeek还发布了Smallpond数据处理框架，进一步增强了3FS在数据管理和处理方面的能力。作为一个全面支持AI应用的数据处理平台，3FS不仅仅是一个存储解决方案，更是一个创新的技术平台，预计将在AI、大数据处理和高性能计算领域带来更多突破。
DeepSeek作为中国科技力量的代表，正在用实际行动证明中国在全球技术创新中的强大推动力。通过3FS的开源，DeepSeek不仅为全球AI和计算领域提供了前沿的技术支持，也向世界展示了中国企业在技术研发上的深厚积累和创新能力。
本文来自微信公众号“PConline太平洋科技”，36氪经授权发布。
