首页 > 科技未来 > 内容

HBM技术如何发展?

发布于:2024-06-18 编辑:匿名 来源:网络

随着NVIDIA AI芯片的热销,HBM(高带宽内存)成为时下存储最热门的领域。

无论是三星、海力士还是美光,他们都投入了大量的研发人员和资金,以保持领先地位。

赛道最前线。

HBM 的初衷是为 GPU 和其他处理器提供更多内存,但随着 GPU 变得越来越强大,需要更快地从内存访问数据,以缩短应用程序处理时间。

例如,在机器学习训练运行中,大型语言模型(LLM)可能需要重复访问数十亿甚至数万亿个参数,这可能需要数小时或数天才能完成。

这也使得传输速率成为HBM的核心参数,现有的HBM都采用了标准化设计:HBM存储器堆栈通过微凸块与HBM堆栈中的硅通孔(TSV或连接孔)连接,并通过放置在基础封装层上的中间件连接,处理器也安装在中间件上,提供HBM和处理器之间的连接。

与普通DRAM相比,这样设计的HBM可以垂直连接多个DRAM,可以显着提高数据处理速度。

目前,HBM产品依次开发为HBM(第一代)、HBM2(第二代)、HBM2E(第三代)、HBM3(第四代)和HBM3E(第五代)。

最新的HBM3E是HBM3的扩展版本,速率为8Gbps。

但对于AI芯片来说,仅靠传统的硅通孔已经无法满足制造商对速度的渴望。

内存制造商和标准组织正在研究如何使用光子学等技术或直接在处理器上安装HBM,从而使像GPU加速的处理器能够提供更快的内存访问速度。

01 新方向是谁? 虽然目前业界都在重点开发HBM3的迭代产品,但各厂商为了争夺市场话语权,对未来HBM技术的发展却有着不同的看法和想法。

三星 三星正在研究在中间件中使用光子技术,该技术可以比电子编码位更快地通过链路,并且消耗更少的电量。

光子链路可以以飞秒速度运行。

这意味着 10-15 个时间单位,或万亿分之一秒(十亿分之一的百万分之一秒)。

在近日举行的开放计算项目(OCP)峰会上,以总工程师李岩为代表的韩国巨头先进封装团队介绍了这一话题。

使用光子集成电路的另一种方法是将 HBM?? 堆栈更直接地连接到处理器(上图中的三星逻辑图)。

这将涉及仔细的热管理以防止过热。

这意味着随着时间的推移,HBM 堆栈可以升级以提供更大的容量,但这只有在行业标准涵盖该领域的情况下才可能实现。

SK海力士 据韩国媒体报道,SK海力士也在研究HBM与逻辑处理器直接连接的概念。

这个概念是将 GPU 芯片与 HBM 芯片一起制造在混合用途半导体中。

芯片制造商认为这是 HBM4 技术,并正在与 Nvidia 和其他逻辑半导体供应商进行谈判。

这个想法涉及存储器和逻辑制造商共同设计芯片,然后由台积电 (TSMC) 等晶圆厂运营商制造。

这有点类似于内存中处理(PIM)的思想。

如果它最终没有成为行业标准,它很可能成为事实上的制造商独占。

Micron Tom's Hardware 报道称,美光和市场上的其他公司正在开展 HBM4 和 HBM4e 活动。

美光目前正在生产 HBM3e gen-2 内存,采用 8 层垂直堆叠 24GB 芯片。

美光的 12 层垂直堆叠 36GB 芯片将于 2020 年第一季度开始提供样品。

该公司正在与半导体代工运营商台积电合作,将其第二代 HBM3e 用于人工智能和 HPC 设计应用。

美光表示,其当前产品具有高能效。

对于安装了 10,000 个 GPU 的设备,每个 HBM 堆栈可节省约 5 瓦的功耗。

与其他 HBM 产品相比,预计五年内可节省高达 5.5 亿美元的运营成本。

支出。

02 下一代 HBM 已有多年历史,从 HBM1 到 HBM3e,它们都保留了相同的位(每堆栈)接口,即具有以相对适中的时钟速度运行的超宽接口。

为了提高存储器传输速率,下一代 HBM4 可能需要对高带宽存储器技术进行更实质性的改变,首先是更宽位的存储器接口。

出于多种技术原因,业界希望在不增加 HBM 存储器堆栈占用空间的情况下实现这一目标,从而使下一代 HBM 存储器的互连密度加倍。

HBM4 将代表多个层面的重大技术飞跃。

就DRAM堆叠而言,位存储器接口需要显着增加存储器堆叠中硅通孔的数量。

HBM技术如何发展?

同时,外部芯片接口需要将凸块间距缩小到远小于55微米,而HBM3目前的凸块总数为(大约),因此微凸块总数需要大幅增加。

内存供应商表示,他们还将在单个模块中堆叠多达 16 个内存模块,即所谓的 16-Hi 堆栈,这增加了技术的复杂性。

(从技术上讲,HBM3也支持16-Hi堆叠,但到目前为止,还没有制造商实际使用它。

)这将允许内存供应商显着增加其HBM堆叠的容量,但也带来了新的复杂性,即如何连接更多的DRAM凸块没有缺陷,然后保持生成的 HBM 堆栈适当且一致地短。

在阿姆斯特丹举行的台积电 OIP 会议上,台积电设计基础设施管理负责人表示:“因为 [HBM4] 不是将速度加倍,而是将 [接口] 引脚加倍。

这就是我们与所有三个合作伙伴合作的原因共同努力确保他们的 HBM4(采用我们的先进封装方法)符合要求,并且 RDL 或中介层或介于两者之间的任何东西都可以支持(HBM4)的布局和速度。

我们将继续与三星、SK 海力士和美光合作。

” 目前,台积电的 3DFabric 内存联盟目前正在努力确保与 CoWoS 封装的 HBM3E/HBM3 Gen2 内存、采用先进封装的 12-Hi HBM3/HBM3E 封装、用于 HBM PHY 的 UCIe 以及三星首创的无缓冲 HBM 技术兼容。

美光今年早些时候表示,“HBMNext”内存将于 2020 年左右上市,每个堆栈的容量在 36GB 到 64GB 之间,每个堆栈的峰值带宽为 2TB/s 或更高。

所有这些都表明,即使内存总线更宽,内存制造商也不会降低 HBM4 的内存接口时钟速度。

03 总结 与三星和SK海力士不同,美光并不打算将HBM和逻辑芯片集成到一颗芯片中。

在下一代HBM的开发方面,韩美内存厂商分歧明显。

美光可能会告诉AMD、英特尔和Nvidia,你可以通过HBM-GPU等组合芯片获得更快的内存访问速度,但仅仅依赖一家公司的芯片意味着更大的风险。

美国媒体表示,随着机器学习训练模型的增加和训练时间的增加,通过加快内存访问和增加每个GPU的内存容量来缩短运行时间的压力也会增加。

为了获得锁定的HBM——结合GPU芯片设计(尽管具有更好的速度和容量)同时放弃标准化DRAM的竞争供应优势可能不是正确的前进方向。

不过,韩国媒体的态度却相当暧昧。

他们认为HBM可能会重塑半导体行业的秩序,并认为IP(半导体设计资产)和工艺的重大变化是不可避免的。

他们还援引业内人士的话说:“除了定制化的‘DRAM一代’之外,可能还有一个更大的世界,甚至像Nvidia和AMD这样的巨头也不得不在三星和SK海力士制造的主板上进行设计。

” SK海力士首席执行官兼总裁Kwak的演讲比较有趣,他表示:“HBM、Computational Express Link(CXL)和内存处理(PIM)的出现将为内存半导体公司带来新的机遇。

”逻辑半导体和存储器的“存储器正在从一般商品向特殊商品转变,而起点将是HBM4。

从这一点来看,下一代HBM技术路线的选择可能会引发存储器领域的又一次大洗牌。

”不妨拭目以待吧。

【本文由投资界合作伙伴微信公众号授权:本平台仅提供信息存储服务】如有疑问,请联系。

投资社区 ()。

HBM技术如何发展?

站长声明

版权声明:本文内容由互联网用户自发贡献,本站不拥有所有权,不承担相关法律责任。如果发现本站有涉嫌抄袭的内容,欢迎发送邮件 举报,并提供相关证据,一经查实,本站将立刻删除涉嫌侵权内容。

标签:

相关文章

  • 提高企业人力资源效率的关键:HR共享服务中心解决方案

    提高企业人力资源效率的关键:HR共享服务中心解决方案

    .wp-block-column h3{margin-left:0} 近年来,随着企业规模的不断扩大和全球竞争的加剧目前,企业人力资源(HR)管理面临巨大挑战。 为了应对这些挑战,越来越多的企业开始关注和投资人力资源共享服务中心(HR SSC)。 本文将详细阐述HR共享服务中心的概念和功能,并推荐沃峰

    06-18

  • 军工隐形冠军博雅精工挂牌,重金投资机构丰年资本赋能产业发展

    军工隐形冠军博雅精工挂牌,重金投资机构丰年资本赋能产业发展

    4月15日,军工+国产另类隐形冠军博雅精工正式在创业板挂牌。 博雅精工今日开盘价50元。 目前,截至发稿,股价为51.5元,股价涨幅高达0.35%。 博雅精密主要从事精密设备、特种设备关键零部件及配套部件的研发、生产和销售。 总之,其生产的产品是横跨军工和民用各个重要领域(

    06-18

  • 辉瑞向基石药业投资2亿美元,共同满足中国肿瘤治疗需求

    辉瑞向基石药业投资2亿美元,共同满足中国肿瘤治疗需求

    据投资界9月30日消息,基石药业(港交所代码:)与辉瑞旗下辉瑞投资有限公司Inc.(纽约证券交易所代码:PFE)(“辉瑞投资”)与辉瑞科学制药有限公司(“辉瑞香港”)今日宣布建立战略合作伙伴关系,其中辉瑞香港对辉瑞科学制药有限公司进行 2 亿美元股权投资基石药业。 抗

    06-17

  • 5月25日,最美手机vivo X5Pro在微信朋友圈上线,拒绝期货

    5月25日,最美手机vivo X5Pro在微信朋友圈上线,拒绝期货

    近期最美手机vivo《手品之美》(据悉是陈硕及其原创创造的“苍白身子”)团队引起了线上线下数百个品牌的互动交流,文案比赛,甚至大学生也用它来表达自己的爱,并且《手品之美》视频已经获得了数百万的预浏览和点击;在重量级数据和“美颜”的诱惑下,朋友圈销量已远超首发1

    06-17

  • 林氏集团收购 SEMSYSCO,推进芯片封装

    林氏集团收购 SEMSYSCO,推进芯片封装

    林氏集团 林氏集团最近宣布,已从 Gruenwald Equity 和其他投资者手中收购了全球湿法加工半导体设备供应商 SEMSYSCO GmbH。 随着SEMSYSCO的加入,林氏集团获得的先进封装能力成为基于高性能计算(HPC)、人工智能(AI)和其他数据密集型应用的尖端逻辑芯片和chiplet的理想解

    06-06

  • 「悟空自家」获盈京丽战略天使投资,估值达1亿元

    「悟空自家」获盈京丽战略天使投资,估值达1亿元

    近日,「悟空自家」获天使战略投资。 投资方为盈京丽,投后估值为1亿元人民币。 悟空自家是多功能智能空间解决方案提供商,致力于为“家居、办公、教育培训、餐饮、商旅、康养、休闲、亲子”领域提供“1+N模式”“多功能+智能”和其他领域。 “空间解决方案。

    06-18

  • 全球融资周报(3.4-3.10)

    全球融资周报(3.4-3.10)

    头条新闻:1、阿里巴巴领投大型模型初创公司MiniMax最新一轮融资。 据悉,通用大型模型初创公司MiniMax正在进行新一轮大规模融资,阿里巴巴是其中Core领投方之一。 目前,阿里巴巴和红杉资本均已承诺参与本轮融资。 本轮总投资将超过6亿美元。 其余投资者仍在洽谈中,相关条款

    06-18

  • 从“云原生”到“AI原生”,创业者与计算平台如何相互成就

    从“云原生”到“AI原生”,创业者与计算平台如何相互成就

    作者 |编辑郑玥|晶宇AI及其“基地”云计算,再次成为创业冲锋。 在国内,秒芽相机成为首个AIGC C端爆红应用。 在业务方面,已经有大量的生产场景应用了AI大模型的能力。 在技??术变革的早期阶段,对于创业者来说,没有比现在更好的时机了。 新技术带来的创新应用层出不穷。 当

    06-17

  • SHEIN,心魔难除

    SHEIN,心魔难除

    上市计划曝光后,SHEIN的动作明显加快:9月25日,全球贸易分析公司ImportGenius的数据显示,电商巨头SHEIN正在向更低的方向迈进——特价服装和家居用品从中国运送到美国仓库,加快购物物流时间。 有业内分析人士表示,SHEIN很可能会继续扩大对美国的批量发货,以缩小与亚马逊

    06-17

  • 天猫618备货总量翻倍,菜鸟供应链推“五宝”助商家备战

    天猫618备货总量翻倍,菜鸟供应链推“五宝”助商家备战

    天猫618总库存翻倍,菜鸟供应链推出“五宝”,帮助商家备战。 2020年天猫即将启动,预计发放价值1亿元的现金券和补贴,创下历史最大记录。 菜鸟供应链数据显示,今年天猫备货量同比、环比均大幅增长。 海外进口商家备货总量同比增长50%,国内商家热门产品备货总量同比增长5%。

    06-18

  • 又热又热! 2024年6大低代码趋势

    又热又热! 2024年6大低代码趋势

    低代码正在成为企业应用开发的主流方式,数字化智能办公专家:兰灵整理了6大趋势供大家参考。 01 低代码正在重构软件行业。 数字化转型正在从CIO话题转变为CEO话题,更多个性化需求不断涌现。 兰陵软件董事长杨健伟表示,CEO关心的是核心竞争力、系统集成、战略和执行力,这些

    06-18

  • 可能是全球最快手机 vivo Xplay5日系小清新图赏

    可能是全球最快手机 vivo Xplay5日系小清新图赏

    可能是全球最抢手的手机vivo热门机型,线上线下都深受用户欢迎。 该机极致的外观和顶级的配置也成为了今年所有旗舰手机的标杆。 那么,这款机器是如何征服如此多挑剔的消费者和用户的呢?今天,日本清新美女用她自己的方式带我们领略Vivo Xplay5的风格。 全球首次将双曲面屏幕

    06-18