DeepSeek官方在3月1日于知乎发布文章，详解DeepSeek-V3/R1推理系统。该系统旨在实现更大吞吐和更低延迟。通过大规模跨节点专家并行(EP)技术，系统优化了批处理大小，提高了传输效率。计算通信重叠技术进一步降低了延迟。此外，负载均衡策略确保了各GPU的均衡工作量。据统计，在2025年2月27日12:00至28日12:00期间，系统峰值占用278个节点，平均占用226.75个节点。系统每秒处理约73.7k输入tokens，14.8k输出tokens，总收入理论可达$562,027/天。