Ning (@Zero_ning) 在 HBM 之父金正浩:AI 的本质是内存,GPU 真正工作的时间只有 10%-30% 中发帖
7 月 6 日消息,被誉为“HBM 之父”的韩国科学技术院(KAIST)电气系教授金正浩近日接受《东亚日报》采访时表示,AI 的核心竞争力正在从 GPU 转向内存。
[2026070601]
金正浩认为 AI 的本质是内存,GPU 在 AI 推理中的利用率远低于理论水平。AI 每次输出结果,都必须先从 HBM 读取数据、传到 GPU 进行计算,再将结果写回内存。就算部署 100 万块 GPU,真正用于计算的时间也只有 10%-30%。
并且过去的 AI 主要集中在训练阶段,因此 GPU 是决定性能的核心。而着眼现在和未来,AI 将进入推理时代,此时真正能决定性能的,是一次能处理多少数据、能以多快速度处理数据,因此内存能力将直接决定 AI 性能。
当然,目前已经有 HBM 这种专门适配 AI 的高带宽内存方案。但随着 AI 迈入多模态化和 Agentic AI(代理式人工智能)出现...