据报道， 戴尔创始人兼CEO Michael Dell近日发表了对AI内存市场前景的判断，预计到2028年，全球AI内存总需求将达到2023年水平的625倍。
这一惊人数字背后是两条增长曲线的叠加，Michael Dell指出，单颗AI加速器的内存容量和全球加速器部署规模正在同步扩张。
NVIDIA 2023年发布的H100搭载80GB HBM内存，预计到2028年，单颗AI加速器所需的内存容量将大幅跃升至2TB，实现约25倍的增长。
与此同时，全球数据中心内AI加速器的部署总量预计也将扩大约25倍，两者相乘，总内存需求便达到了625倍的量级。
从NVIDIA产品的演进路径也能看出这一趋势：H100（80GB HBM）、H200（141GB HBM）、B200（192GB HBM）、B300（288GB HBM）、Vera Rubin（288GB HBM4 + 1536GB SOCAMM = 1824GB）。
SOCAMM是由NVIDIA主导、联合三星、SK海力士、美光等厂商共同开发的模块化内存标准，专门面向AI服务器和AI PC的工作负载优化。
与HBM不同，SOCAMM承担的是CPU侧的大容量内存角色，在Vera Rubin平台上单颗即可提供1536GB容量，直接将单加速器系统的内存天花板推到了接近2TB。
Michael Dell还强调， 内存供给的扩张需要数年时间，但当前AI基础设施的需求并未显示出任何放缓的迹象，“我们仍处于技术导入的早期阶段”。
更多阅读：