
侧向堆叠芯片:为AI提供更多内存带宽的新方案
日本研究人员成功展示了一种侧向堆叠芯片的原型,通过解决复杂的3D集成问题,为AI系统提供了更高的内存带宽和更低的散热压力。
背景:AI的内存瓶颈
随着AI模型规模的指数级增长,传统内存架构逐渐成为性能瓶颈。高带宽内存(HBM)虽然通过垂直堆叠DRAM芯片提升了数据传输速率,但其散热问题日益突出——堆叠层数越多,热量越难散发,导致芯片温度升高、性能下降。
侧向堆叠:一种新的3D集成思路
日本研究团队提出的方案打破了传统垂直堆叠的思维定式,将芯片侧向排列,即让芯片“躺倒”并沿水平方向扩展,而非向上叠加。这种设计的关键在于解决了3D集成中的互连难题:如何在不增加热阻的前提下,实现芯片间的高密度、高带宽连接。
研究团队开发了一种新型的侧向互连技术,通过微小的金属凸块和硅通孔(TSV)将芯片并排连接,形成类似“书架”式的结构。这种布局不仅缩短了芯片间的物理距离,还允许热量通过基板直接散发,避免了垂直堆叠中热量逐层累积的问题。
性能与优势
原型测试结果显示,侧向堆叠方案在带宽密度上比传统HBM提升了约40%,同时芯片工作温度降低了15°C以上。这意味着AI加速器(如GPU或NPU)可以在更低的功耗下获得更快的数据吞吐,尤其适合需要频繁访问大容量内存的深度学习训练和推理场景。
此外,该方案对现有制造工艺的兼容性较好,无需全新的设备投入,有望在2-3年内实现商业化。不过,研究团队也指出,侧向堆叠会占用更大的水平面积,在空间受限的移动设备中可能不如垂直堆叠有优势。
行业影响与展望
当前,HBM市场由三星、SK海力士和美光主导,它们正竞相推出更高层数的垂直堆叠产品(如HBM3E)。侧向堆叠的出现提供了一条差异化技术路径,尤其适合对散热要求严苛的数据中心AI服务器。
值得注意的是,这项技术并非要取代垂直堆叠,而是与之互补。未来,我们可能会看到混合堆叠架构:将侧向堆叠用于高带宽缓存层,垂直堆叠用于大容量存储层,从而在功耗、带宽和容量之间取得更优平衡。
对于AI开发者而言,这意味着更快的模型训练速度和更低的推理延迟。随着该技术的成熟,AI芯片的内存墙问题有望得到进一步缓解。