英伟达NVHBM亮相:为AI加速器赋能 带宽功耗双优化助力性能提升
英伟达近日宣布,其NVLink Fusion工具套件迎来重要升级,新增的NVHBM定制内存组件为AI加速器设计带来突破性变革。这项技术通过重构高带宽内存(HBM)架构,在带宽、功耗和芯片集成度等关键指标上实现显著优化,已获得亚马逊旗下Annapurna Labs的率先采用。
作为专为NVLink扩展域设计的内存解决方案,NVHBM采用定制化基础裸片架构,将内存控制器直接集成于HBM堆栈底层。这种创新设计使每个内存堆栈的带宽较标准HBM4e提升最高达30%,同时减少主计算芯片上30%的内存相关电路面积。通过释放的封装空间,芯片设计者可增加计算单元密度或简化多芯片互连布线,特别适用于需要连接数千个处理器的超大规模AI系统。
功耗优化是该技术的另一核心优势。测试数据显示,NVHBM在相同性能下比商用HBM4e降低15%能耗,这部分节省的电力可转化为额外的计算性能或支持更多功能单元。对于依赖持续数据传输的AI推理场景,内存带宽的提升可直接转化为每秒Token生成量的增长,而能耗降低则意味着在固定功率预算下可部署更多加速器节点。
技术实现层面,NVHBM通过将物理层接口(PHY)小型化并转移至基础裸片,使合作伙伴能更便捷地将定制PHY集成到自身芯片设计中。这种架构革新不仅简化了先进封装技术的实施流程,更解决了传统方案中HBM控制器占用主芯片宝贵面积的痛点。据英伟达透露,采用该技术的芯片设计周期可大幅缩短,相比从零开发标准HBM接口更具时效优势。
Annapurna Labs成为首个公开采用该技术的合作伙伴,其下一代Trainium 4 AI芯片已支持NVLink Fusion扩展接口。该公司副总裁Nafea Bshara表示,这项技术合作将为AWS云基础设施的AI算力部署带来显著效益。虽然目前尚未有量产产品应用该技术,但行业观察人士认为,随着超大规模AI集群对能效比要求的持续提升,NVHBM有望成为高端AI加速器的标准配置。
这项技术突破再次凸显英伟达在AI基础设施领域的生态布局能力。通过提供从互连协议到定制内存的全栈解决方案,英伟达正构建起区别于传统芯片供应商的竞争优势。对于需要差异化竞争力的芯片设计企业而言,NVHBM与NVLink Fusion的组合提供了一条快速进入高端AI市场的可行路径。
