- 1
- 2
- 3
- 4
- 5
大模型训练实测之摩尔线程MTT S5000训练DeepSeek-V3推理性能与PrefillDeco
资料介绍
大模型训练实测之摩尔线程MTT S5000训练DeepSeek-V3推理性能与PrefillDecode延迟分析
测试背景
摩尔线程MTT S5000基于第四代MUSA架构"平湖",原生适配PyTorch、Megatron-LM、vLLM等主流框架。2025年底,摩尔线程联合硅基流动基于MTT S5000完成了对DeepSeek-V3 671B满血版的深度适配与性能测试。这是国产GPU首次在单卡千TFLOPS级别上跑通万亿参数MoE模型的完整推理流程。
测试配置为基于MTT S5000的夸娥万卡集群下的推理子集,单卡FP8算力1000 TFLOPS,80GB显存,1.6TB/s显存带宽。软件栈基于PyTorch + vLLM适配版本,启用FP8量化。
小结
摩尔线程MTT S5000在DeepSeek-V3推理场景中展现了强劲性能——Prefill吞吐为H20的2.5倍,Decode吞吐为H20的2.1倍。FP8原生支持和千卡级线性扩展效率95%的验证数据表明,S5000已具备对标H100的工程能力。
部分文件列表
| 文件名 | 大小 |
| 245-大模型训练实测之摩尔线程MTT_S5000训练DeepSeek-V3推理性能与PrefillDecode延迟分析.docx | 38K |
最新上传
-
yahuang001 打赏3.00元 3天前
-
yahuang001 打赏1.00元 3天前
-
zhongshaoxiong 打赏3.00元 3天前
-
他山之石可攻玉 打赏60.00元 3天前
用户:烟雨
-
江岚 打赏210.00元 3天前
用户:潇潇江南
-
江岚 打赏100.00元 3天前
-
21ic下载 打赏310.00元 3天前
用户:gsy幸运
-
21ic下载 打赏310.00元 3天前
用户:zhengdai
-
21ic下载 打赏310.00元 3天前
用户:江岚
-
21ic下载 打赏210.00元 3天前
用户:潇潇江南
-
21ic下载 打赏60.00元 3天前
用户:他山之石可攻玉
-
21ic下载 打赏60.00元 3天前
用户:烟雨
-
21ic下载 打赏60.00元 3天前
用户:w178191520
-
21ic下载 打赏60.00元 3天前
用户:w993263495
-
21ic下载 打赏110.00元 3天前
用户:xzxbybd
-
21ic下载 打赏60.00元 3天前
用户:zq_1943
-
21ic下载 打赏20.00元 3天前
用户:kk1957135547
-
21ic下载 打赏20.00元 3天前
用户:sun2152
-
21ic下载 打赏20.00元 3天前
用户:铁蛋锅
-
21ic下载 打赏20.00元 3天前
用户:xuzhen1
-
21ic下载 打赏20.00元 3天前
用户:w1966891335
-
21ic下载 打赏35.00元 3天前
用户:有理想666
-
21ic下载 打赏15.00元 3天前
用户:nuaanuaa111
-
21ic下载 打赏20.00元 3天前
用户:liqiang9090
-
21ic下载 打赏15.00元 3天前
用户:ningmengge
-
21ic下载 打赏10.00元 3天前
用户:mulanhk
-
21ic下载 打赏5.00元 3天前
用户:asys
-
21ic下载 打赏10.00元 3天前
用户:舞蹈荀彧
-
21ic小能手 打赏5.00元 3天前
资料:磁编码器开源方案
-
21ic小能手 打赏5.00元 3天前
-
21ic小能手 打赏5.00元 3天前
-
江岚 打赏20.00元 3天前
-
江岚 打赏50.00元 3天前
-
江岚 打赏20.00元 3天前
-
江岚 打赏10.00元 3天前
-
21ic小能手 打赏10.00元 3天前
-
21ic小能手 打赏8.00元 3天前
-
21ic小能手 打赏8.00元 3天前
-
21ic小能手 打赏5.00元 3天前
-
21ic小能手 打赏3.00元 3天前




全部评论(0)