当前位置:首页 > Deepseek最新资讯 > 正文内容

英特尔 Gaudi 2E AI 宣布为 DeepSeek V3.1 提供加速支持

5小时前Deepseek最新资讯13

  IT之家查询获悉,英特尔 Gaudi 2E 采用 7nm 制程,配备 96GB HBM2E 内存、48MB SRAM,具备 2.4TB 总内存带宽,针对随机访问deepseek、线性访问场景进行深度优化,有效避免了 AI 训练或推理任务的延迟。

  英特尔表示,Gaudi 2E 具备 24 个完全可编程的张量处理器核心(TPC)、2 个矩阵乘法引擎(MME),拥有卓越的可扩展能力,提供 24 个 100 GbE 端口,支持多卡互联,为用户提供了灵活的、可定制化的解决方案,满足其不断变化的 AI 需求。

  英特尔表示,实测数据显示,在英特尔 Gaudi 2E 的支持下,DeepSeek-V3.1 无论是在问答还是编码上,能力都有着显著提升:

  在输入 / 输出 token 长度均为 2k、多用户并发数为 28 的条件下,每个并发 token 生成速率达到每秒 10 token。原文出处:英特尔 Gaudi 2E AI 宣布为 DeepSeek V3.1 提供加速支持,问答编码能力都有显著提升,感谢原作者,侵权必删!

标签: deepseek

“英特尔 Gaudi 2E AI 宣布为 DeepSeek V3.1 提供加速支持” 的相关文章

DeepSeek“点燃”国产芯片 FP8能否引领行业新标准?

DeepSeek“点燃”国产芯片 FP8能否引领行业新标准?

  近日,DeepSeek宣布其新一代模型DeepSeek-V3.1采用了UE8M0 FP8 Scale参数精度,并明确指出该精度标准是针对即将发布的下一代国产芯片设计。这一消息迅速在资本...

备件管理准确率98%!AI如何重塑高效售后服务?

备件管理准确率98%!AI如何重塑高效售后服务?

  晚上9点半,广州,某知名新茶饮品牌门店内,店长小林接到了平云小匠工程师的电话。确认其在店及报修情况后,工程师半小时内携备件到达门店,根据标准作业程序操作,完成签到、检测、维修、确认核销...

DeepSeek掷出FP8骰子

DeepSeek掷出FP8骰子

  芯片指数与AI算力指数近期持续走高背后,是AI浪潮与大模型算力需求剧增下,国产替代加速与供应链多元化路径日渐成熟的趋势。而DeepSeek掷出FP8这颗 “魔力骰子”,不仅精准切中行业...

特斯拉接入豆包和DeepSeek南财合规周报(第204期)

特斯拉接入豆包和DeepSeek南财合规周报(第204期)

  上周,我们重点关注国家发改委等三部门拟规范互联网平台定价机制,保障经营者自主定价权、治理“大数据杀熟”等问题;市场监管总局强化直播电商乱象治理,再次点名“三只羊”“东北雨姐”;智谱发布...

Deepseek推荐全国旅游百强区第3名:云南昆明市盘龙区

Deepseek推荐全国旅游百强区第3名:云南昆明市盘龙区

  日前,全国县镇发展研究课题组、天和经济研究所县镇发展研究院联合发布了2024《全国县镇发展报告》,报告评价篇对全国县市以及包含乡村人口的市辖区旅游发展水平进行了综合评价,并发布了天和2...

清华学者Nature Medicine发文:DeepSeek狂奔,已在近800家

清华学者Nature Medicine发文:DeepSeek狂奔,已在近800家

  DeepSeek-R1 成为美国苹果应用商店下载量最高的聊天机器人,超越了 OpenAI 的 ChatGPT。与相比,DeepSeek-R1 在效率、成本和透明度方面具有优势,一度导致...