首页
学习
活动
专区
圈层
工具
发布

摩尔线程携手硅基流动实现DeepSeekV3大模型高性能推理

观点网讯:1月21日 ,摩尔线程与硅基流动联合宣布,双方在MTT S5000上,利用FP8低精度推理技术,完成了对DeepSeek V3 671B满血版大模型的深度适配与性能测试。

据介绍,实测单卡Prefill(预填充)吞吐超4000tokens/s,Decode(解码)吞吐超1000tokens/s,单卡速度逼近国际顶尖产品。

免责声明:本文内容与数据由观点根据公开信息整理,不构成投资建议,使用前请核实。

  • 发表于:
  • 原文链接https://page.om.qq.com/page/OAhHcPuRQXUL8i-VYVic0jjw0
  • 腾讯「腾讯云开发者社区」是腾讯内容开放平台帐号(企鹅号)传播渠道之一,根据《腾讯内容开放平台服务协议》转载发布内容。
  • 如有侵权,请联系 cloudcommunity@tencent.com 删除。

相关快讯

领券