今日,《科创板日报》报道,人工智能公司DeepSeek在AI开源社区Hugging Face发布了全新模型DeepSeek-Prover-V2-671B。该模型参数量高达6710亿,是Prover-V1.5的升级版,采用更高效的safetensors文件格式并支持多计算精度,便于快速训练与部署。其架构基于DeepSeek-V3,运用MoE混合专家模式,含61层Transformer层及7168维隐藏层,支持超长上下文,最大位置嵌入达16.38万,可高效处理复杂数学证明任务。此外,模型通过FP8量化技术优化推理效率,减小模型体积。此模型的发布标志着深度学习领域的重要进展,值得关注。
原文链接
本文链接:https://kx.umi6.com/article/18038.html
转载请注明文章出处
相关推荐
.png)
换一换
DeepSeek发布Prover-V2模型 参数量达6710亿
2025-04-30 20:46:01
DeepSeek-Prover-V2-671B 新模型开源发布
2025-04-30 19:50:58
Meta发布开源大模型Llama 4,首次采用“混合专家”架构
2025-04-06 06:46:52
418 文章
63780 浏览
24小时热文
更多

-
2025-07-19 22:57:32
-
2025-07-19 21:58:20
-
2025-07-19 21:57:13