Rambus高速GDDR6 PHY打通AI应用的数据瓶颈

发布时间:2023-06-28  

几年前当刚开始流行之时,很多人预测应用最大的瓶颈将是存储器的读取和写入速度,这会严重影响训练和推断的效率,以及做出相应反馈的速度。特别是2023年以来,以ChatGPT为代表的生成式让人们看到了智能世界的无限可能,而如何有效地采集、存储、传输、处理数据和模型则成为实现高质量AI的关键,这就需要高速传输技术的革新。

本文引用地址:

无论是云端AI训练还是向网络边缘转移的AI推理,都需要高带宽、低时延的内存。鉴于GPU已经成为目前人工智能训练和推理中的核心处理单元,迈向高性能GDDR6内存接口已是大势所趋。近日,半导体IP和芯片供应商推出业界领先24Gb/s GDDR6 ,致力于通过进一步提升传输速度解决AI训练和推理面临的存储焦虑问题。

致力于使数据传输更快更安全,关注产品的产品和方案的易用性,通过一站式的解决方案以及完善的服务机制,使产品方案变得更容易在客户端集成使用。产品方面,的内存接口芯片不断提高数据中心内存模块的速度和容量,数据安全方面,Rambus有着丰富的安全IP产品线,对用于静态数据和动态数据安全保护都有专门的产品方案,包括安全信任和MACsec和Ipsec等等,整体来说,Rambus的产品应用领域聚焦于服务器、主内存、智能网卡、网络服务和交换机,以及面向未来的内存扩展和池化等市场。“ChatGPT等AIGC应用与我们公司的产品组合是非常契合的。”Rambus大中华区总经理苏雷说,他特别谈到于中国市场,中国目前AI应用和部署走在世界前列,Rambus希望更多、更紧密地支持中国公司在AI产业的发展,“Rambus面对中国客户的需求,有最好的技术、最快的响应和最好的技术支持来服务中国市场。”

Rambus GDDR6 以及控制器的配套产品,可以实现业界领先的24Gb/s数据传输速率,作为全新的一个行业标杆,将为AI推理等应用场景带来巨大性能优势和收益。除性能之外,该组合另一大优势是对功耗的管理。当设备在高速和高带宽环境下运行时,良好的功耗管理非常重要。

在系统层面设计的考量方面,如果要确保系统在24Gb/s环境下运行,需要良好的系统级信号完整性。Rambus信号完整性的工程师,也会与客户进行非常紧密的从设计初期开始的合作,能够确保客户运行系统的时候达到最高的性能。另外,Rambus提供的产品已经实现了以及控制器的完整集成。在客户收到产品之后,可以直接对这些子系统进行定制化应用。

Rambus IP核产品营销高级总监Frank Ferro介绍,AI推理应用对带宽的需求通常在200到500Gb/s的范围之间波动,每一个GDDR6设备的带宽都可以达到96Gb/s,因此通过将4-5个GDDR6设备组合在一起,就能轻松满足500Gb/s及以下的带宽需求。如果用到一个HBM3设备,基本上会把这个带宽需求的数字翻倍,能够达到接近800Gb/s的带宽,而这超过了AI推理本身所需要的400到500Gb/s带宽,会使成本增加3~4倍。在这种条件下,HBM并非一个经济高效的选择,GDDR6则是一个更好的替代。他特别建议按需选择HBM或是GDDR6内存,对于对高带宽和低延迟有很高要求的AI训练场景,HBM可能是更好的选择;对于需要更大容量、更高带宽的AI推理场景,GDDR6会是更合适的选择。

Rambus的产品实现了PHY和控制器的完整集成,其内存接口系统包括PHY物理层、控制器、DRAM和客户端ASIC,其中,PHY的物理层与DRAM直接相连,接口由两个16位插槽组成,共32位,另一侧的DFI接口与内存控制器连接,控制器会直接接入整个系统的逻辑控制。Rambus会提供下图中的蓝色部分——即完整的子系统(与Rambus GDDR6数字控制器IP相结合),使得客户可以根据场景所需进行定制化使用。此外,Rambus可以保障良好的系统级信号完整性和电源完整性(SI/PI),并且支持LabStation开发环境,能够快速建立系统,进行特性分析和调试。

图片.png

如今,GDDR在AI/ML场景(如AI推理等)中有着广泛的使用,还会应用于图形计算、网络等场景。与DDR相比,GDDR在带宽、速度、功耗等方面有着显著优势,吸引了更多的客户将其结合到各类先进设计中。作为系统级解决方案的一部分,Rambus GDDR6可以为AI/ML、图形和网络应用提供高效益、高带宽、低延迟的内存接口解决方案。同时,RambusGDDR6 PHY还有着更优的功耗管理表现。

Rambus通过领先的高性能内存和互联解决方案以及硬件级安全,支持下一代数据中心的发展。其产品应用领域聚焦于服务器主内存、人工智能和网络加速器、智能网卡、网络存储、网络交换机以及内存扩展和池化等。苏雷介绍,Rambus有着丰富的接口IP产品组合,同时也提供像DDR、LPDDR以及HBM等产品,并非常关注SerDes产品的开发,主要聚焦于PCIe和CXL接口,会开发配套的PHY及控制器。Rambus的HBM产品拥有领先的市占率,同时其HBM3产品已经能够提供高达8.4Gbps/s的数据传输速率。

文章来源于:电子产品世界    原文链接
本站所有转载文章系出于传递更多信息之目的,且明确注明来源,不希望被转载的媒体或个人可与我们联系,我们将立即进行删除处理。

相关文章

    斑马技术HC20和HC50移动数据终端荣获第八届年度MedTech突破奖; 2024年7月25日,中国上海 —— 作为致力于助力企业实现数据、资产和人员智能互联的先进数字解决方案提供商,斑马......
    霍尼韦尔新品斩获国际物联网展金奖 赋能精益智造转型;霍尼韦尔(纳斯达克代码:HON)在近日开幕的第十八届国际物联网展(IOTE)上推出全新的移动数据终端和固定式读码器等创新技术和解决方案,其中......
    的串行通信接口标准有RS-232C、RS-422、RS-423和RS-485。其中,RS-232C作为串行通信接口的电气标准定义了数据终端设备(DTE:data terminal equipment)和数据......
    和TC21移动数据终端,斑马技术的库存管理解决方案可帮助企业进行快速准确的库存盘点;在货物拣选方面,斑马技术的一系列可穿戴设备(包括RS5100 蓝牙可穿戴扫描器、WT6300 佩戴式数据终端......
    降本增效的同时提升客户体验。”在本次展会上,斑马技术通过全方位覆盖物流运营的解决方案,重点展示其在实时数据采集方面的先进技术优势。其中,通过结合运用RFD40 UHF RFID背夹和TC21移动数据终端,斑马......
    降本增效的同时提升客户体验。” 在本次展会上,斑马技术通过全方位覆盖物流运营的解决方案,重点展示其在实时数据采集方面的先进技术优势。其中,通过结合运用RFD40 UHF RFID背夹和TC21移动数据终端,斑马......
    ,该公司推出首款手持式激光条码扫描器。1991年,其推出首款扫描型二维码。2004年,其推出首款耐用型RFID手持式读取器;推出首款企业数字助理。2015-2016年,其将智能化技术嵌入移动数据终端......
    LTC2844数据手册和产品信息;LTC®2844 是一款 4 驱动器 / 4 接收器多协议收发器。LTC2844 和 LTC2846 形成了一个完整的软件可选数据终端设备 (DTE) 或数据......
    可变渲染技术,它能自动侦测画面场景特征,动态调整局部渲染,从而降低游戏功耗。 与此同时,联发科还打造了全新的游戏自适应调控技术,可以根据终端硬件的实时负载情况,动态调整游戏的渲染逻辑,带来......
    一线人员实现更优化的临床工作和患者护理。”此次在CHIMA 2023大会上,斑马技术将重点展示其广泛的医疗保健产品及解决方案以及多个医疗场景中的应用,展品包括TC26-HC移动数据终端、ZD510-HC打印......

我们与500+贴片厂合作,完美满足客户的定制需求。为品牌提供定制化的推广方案、专属产品特色页,多渠道推广,SEM/SEO精准营销以及与公众号的联合推广...详细>>

利用葫芦芯平台的卓越技术服务和新产品推广能力,原厂代理能轻松打入消费物联网(IOT)、信息与通信(ICT)、汽车及新能源汽车、工业自动化及工业物联网、装备及功率电子...详细>>

充分利用其强大的电子元器件采购流量,创新性地为这些物料提供了一个全新的窗口。我们的高效数字营销技术,不仅可以助你轻松识别与连接到需求方,更能够极大地提高“闲置物料”的处理能力,通过葫芦芯平台...详细>>

我们的目标很明确:构建一个全方位的半导体产业生态系统。成为一家全球领先的半导体互联网生态公司。目前,我们已成功打造了智能汽车、智能家居、大健康医疗、机器人和材料等五大生态领域。更为重要的是...详细>>

我们深知加工与定制类服务商的价值和重要性,因此,我们倾力为您提供最顶尖的营销资源。在我们的平台上,您可以直接接触到100万的研发工程师和采购工程师,以及10万的活跃客户群体...详细>>

凭借我们强大的专业流量和尖端的互联网数字营销技术,我们承诺为原厂提供免费的产品资料推广服务。无论是最新的资讯、技术动态还是创新产品,都可以通过我们的平台迅速传达给目标客户...详细>>

我们不止于将线索转化为潜在客户。葫芦芯平台致力于形成业务闭环,从引流、宣传到最终销售,全程跟进,确保每一个potential lead都得到妥善处理,从而大幅提高转化率。不仅如此...详细>>