FTX 前总裁 Brett Harrison 想把 AI 推理算力做成竞价市场,GPU 提供方按边际成本实时调价来压低价格,思路挺有意思。
#AI推理
苏姿丰说了几个关键数字:推理占 60% 市场、CPU 市场 5 年涨到 2000 亿美元,Helios 已经进了 OpenAI 和 Meta 的机房,数据很具体。
Prime Intellect 把不到 10 人的 Moondream 收了,看中的是推理加速能力,想降算力成本、拉拢做机器人和 Agent 的客户。
Astera Labs 出了个开放机架架构 Orion,算力像搭积木一样自由组合,单 pod 能塞 160 块加速卡,搞数据中心的朋友可以看看。
Szegedy 回应 Tao 和 Gowers 的文章,说 AI 数月内就能猜想和理论化,他还写了篇长文讲自己的判断,可以看看他怎么论证的。
英特尔新推出的Crescent Island加速卡,专为AI推理设计,内存高达480GB,是处理AI工作负载的理想选择,比同类产品内存容量更高。
Marvell 出了新一代 SSD 主控 Bravera SC6,PCIe Gen6 速度比上代翻倍,还能把 AI 推理的 KV Cache 挪到 SSD 上,做存储的可以关注。
宜鼎新内存速度提升 45%,容量最高 128GB,适合跑 AI 推理和计算密集型任务,2026 Q4 送样。
OpenAI研究员认证!AMD和Cerebras合作搞的AI推理方案,延迟低到任务秒完成,每瓦性能提升5倍,搞AI推理的可以看看。
AMD和Cerebras联手搞推理方案,把Helios和晶圆引擎用在推理上,每瓦token吞吐能翻5倍,专治英伟达Groq组合。
俩公司把高吞吐和低延迟硬件凑一块,2026年推云服务。合作消息一出,Cerebras股价涨11%,说明市场很看好。
英伟达 Vera CPU 在智能体 AI 任务上干翻英特尔,延迟 29ms 对 64ms,直接快 2 倍多,搞 AI 推理的得关注。
微软要用 AMD 最新的 Helios 平台(EPYC Venice+MI455X)跑 AI 推理,32TB 显存、2900 PFLOPS 算力,适合大规模推理负载。