17173 > 游戏资讯 > 科技新闻 > 正文

AMD 携手 Cerebras 押注低时延 AI 推理:每瓦每秒 Token 吞吐提升 5 倍

2026-07-24 14:02:42 神评论
17173 新闻导语

AMD携手Cerebras推出超低延迟AI推理方案,Helios机架+晶圆级引擎双剑合璧,每瓦每秒Token吞吐量飙升5倍,性能碾压英伟达与Groq合作!

7 月 24 日消息,科技媒体 Wccftech 今天(7 月 24 日)发布博文,报道称在 Advancing AI 2026 活动中,AMD 宣布携手 Cerebras 公司,联合开发 AI 推理解决方案。

根据官方新闻稿,该方案主要针对超低延迟 AI 推理场景,将整合 AMD 的 Helios 机架级解决方案与 Cerebras 的晶圆级引擎,从而应对英伟达和 Groq 合作。

按照双方披露的路线,Helios 机架承担高性能、可扩展吞吐引擎角色,主要处理提示词与大上下文窗口。

Cerebras 的 Wafer-Scale Engine 则负责对内存带宽要求更高的 Token 生成与解码环节,强调超低时延表现,结合使用 2 个计算引擎,预估可以将每瓦每秒 token 数量提高 5 倍。附上相关截图如下:

Cerebras 介绍称,Wafer-Scale Engine 在单块互连硅片上无缝连接数十万个计算核心和数十 GB 的 SRAM,减少外部网络瓶颈对数据传输的影响。

【来源:IT之家】
关于AMD,Cerebras,AI推理,低时延,每瓦每秒Token,Helios机架,Wafer-Scale Engine,英伟达,Groq,晶圆级引擎的新闻