2024 年 12 月 26 日，
图：DeepSeek 官网对话界面。V3 在 14.8T tokens 多语言语料上预训练，采用 FP8 混合精度并在 H800 集群上训练，官方披露总训练成本约 557.6 万美元（约 278.8 万 GPU 小时）。
版本速览
| 项目 | 内容 | |
NEWS
DeepSeek 发布 V3 大模型：671B MoE 基座，性能对标 GPT-4o 与 Claude 3.5
2024 年 12 月 26 日，DeepSeek 发布 671B 参数的 MoE 基座模型 DeepSeek-V3，单 token 激活约 37B，新增多 token 预测并采用 FP8 混合精度训练，性能对标 GPT-4o 与 Claude 3.5 Sonnet，并以极低训练成本引发业界关注。
来源
DeepSeek 官方
评论交流
欢迎分享看法。评论审核通过后公开；待审核和已拒绝的评论仅自己可见，邮箱不会公开。