AI计算,CPU仍有一战之力:英特尔第四代至强再现强大AI性能

发布时间:2023-11-15  

近期,MLCommons公布了针对AI模型训练的行业标准MLPerf训练v3.1基准测试结果。其中,内置英特尔®高级矩阵扩展(英特尔®AMX)加速引擎的第四代英特尔®至强®可扩展处理器作为唯一提交MLPerf测试结果的CPU,在测试中展现出强大的性能,进一步印证了英特尔对加速在云、网、边、端的工作负载中大规模部署AI的承诺。


本次,英特尔提交了ResNet50、RetinaNet、BERT和DLRM dcnv2的测试结果。值得注意的是,在DLRM dcnv2这一个新提交的测试模型中,第四代英特尔至强可扩展处理器仅使用四个节点就在227分钟内完成了训练。而对于ResNet50、RetinaNet和BERT,第四代英特尔至强可扩展处理器亦展示出了强大的开箱即用的性能。


在通用AI工作负载中第四代至强可扩展处理器具备出色性能


在分别于今年6月、9月和11月进行的三次测试中,英特尔提交了基于第四代英特尔至强可扩展处理器的多个推理基准测试,结果显示,包括视觉、语言处理、语音和音频翻译模型,以及更大的DLRM v2深度学习推荐模型及60亿参数大语言模型及计算机视觉与自然语言处理模型ChatGPT-J在内,第四代英特尔至强处理器对于通用AI工作负载拥有出色的性能。英特尔也与OEM厂商合作提交了测试结果,进一步展示了其AI性能的可扩展性,以及基于英特尔至强处理器的通用服务器的可获取性,充分满足客户服务水平协议 (SLA)。


第四代英特尔至强可扩展处理器的强大性能为企业提供了“开箱即用”的功能,可以在通用系统上部署AI以用于数据预处理、模型训练和部署,从而获得兼具AI性能、效率、准确性和可扩展性的最优组合,避免了引入专用AI系统的高昂成本和复杂性,其范围覆盖了多个框架、端到端数据科学工具,以及广泛的智能解决方案生态系统。许多企业可以在其现有的企业级IT基础设施上使用通用CPU进行高性价比、可持续地训练中小型深度学习模型,尤其适用于训练对象是间歇性工作负载的用例。


截止目前,第四代至强可扩展处理器已出货一百万片,并凭借其强劲的AI性能被本地生态伙伴广泛应用于众多领域。在于百度智能云9月发布的新一代云服务器BCC实例中,第四代至强可扩展处理器以AMX加速器扩展AI算力,从而使百度智能云用户在任何实例上轻松获取原生的强大AI能力。得益于英特尔AMX指令集针对矩阵运算的强大加速能力,腾讯BERT模型BF16吞吐量获得大幅提升,从而有效地优化了其AI用户的终端体验。通过AMX INT8及BF16的不同精度数据处理、AVX-512的深入调优,以及英特尔软件的加持,阿里云地址标准化业务和淘宝搜索的定制化推荐业务实现了大幅性能提升。


与此同时,第四代英特尔至强可扩展处理器亦助力亚信、用友、金蝶和东软等独立软件服务商实现在OCR等领域的多项业务升级,助力其成功应对来自不同应用场景的多样化AI工作负载需求。


致力于推动AI无处不在,英特尔不仅打造包括第四代英特尔至强可扩展处理器在内的硬件产品,亦通过开源的软件堆栈和开放的生态为生态伙伴提供全方位助力,旨在满足千行百业对多重性能、能效和易用性的动态要求,进一步推动AI应用落地。


文章来源于:电子工程世界    原文链接
本站所有转载文章系出于传递更多信息之目的,且明确注明来源,不希望被转载的媒体或个人可与我们联系,我们将立即进行删除处理。

相关文章

    技术的看客,会懂得对于CPU来说L2缓存是多么的重要,这就是一些应用在运行时莫名卡顿的原因。 big.LITTLE大小核切换技术运用到了现在,A72和A53,本来如果是四个A72+A53是没有什么......
    CPU 中,您会发现多个复杂的高性能 CPU 内核。四核是主流计算机的典型特征,但六核和八核 CPU 正在成为主流。高端的专业电脑可能有几十个甚至上百个CPU核心,尤其是可以容纳一个以上CPU......
    就来介绍GPU超频有什么用,GPU超频有什么好处和坏处。 一、GPU超频有什么用 GPU在电脑中一般称为图形处理器,对电脑图形的成像质量起到了至关重要的作用。但是在运行高质量的图像时,就会......
    行业首个)。值得一提的是,此前这三块屏幕便已经获得德国莱茵T?V颁发的硬件级低蓝光产品认证。 ●莱茵TUV无频闪认证是什么有什么用?    莱茵无频闪认证(TUV Rheinland......
    是ADC的参考基准吗?它有什么用? 答:STM32片内的Vrefint电压不是ADC模块的参考基准,STM32片内ADC的参考基准可以是Vref,或VDDA【多数时候VDDA跟VDD是接在一起的】,有些......
    越来越强,性能过剩的话题也没有什么用户进行提及,并且功耗控制也要比以前变得更好了,所以体验自然会更好。 重点是有很多用户体验到高性能所带来的高流畅度之后,自然也是会对强悍的性能更加的赏识。 ......
    的压力和动力。 只不过,Intel还需要面对的一个潜在问题,就是AMDZen架构能具有什么样的表现,假如Zen在处理器性能和效率上赶上Intel的步伐,那么Intel将重新经历久违的市场竞争——毕竟AMD在图......
    很好的玩具,是个提升日常使用效率的工具,可以作图、对话等。而AIPC对于企业来说,到底有什么用? 通常对企业来说,PC不只是一台电脑这么简单。从IT的角度考虑,成百上千台由公司采购的电脑,需要......
    第四个UEFI支持的芯片指令系统架构。这具有什么样的重大意义? OpenCV是一套Apache 2协议的C++开源库,涉及图像处理、三维重建、人工智能等领域。这些领域都对性能有......
    CPU 与 GPU 的区别分析(2024-12-04 12:19:10)
    CPU 与 GPU 有什么区别? CPU 和 GPU 具有很多共同点。它们......

我们与500+贴片厂合作,完美满足客户的定制需求。为品牌提供定制化的推广方案、专属产品特色页,多渠道推广,SEM/SEO精准营销以及与公众号的联合推广...详细>>

利用葫芦芯平台的卓越技术服务和新产品推广能力,原厂代理能轻松打入消费物联网(IOT)、信息与通信(ICT)、汽车及新能源汽车、工业自动化及工业物联网、装备及功率电子...详细>>

充分利用其强大的电子元器件采购流量,创新性地为这些物料提供了一个全新的窗口。我们的高效数字营销技术,不仅可以助你轻松识别与连接到需求方,更能够极大地提高“闲置物料”的处理能力,通过葫芦芯平台...详细>>

我们的目标很明确:构建一个全方位的半导体产业生态系统。成为一家全球领先的半导体互联网生态公司。目前,我们已成功打造了智能汽车、智能家居、大健康医疗、机器人和材料等五大生态领域。更为重要的是...详细>>

我们深知加工与定制类服务商的价值和重要性,因此,我们倾力为您提供最顶尖的营销资源。在我们的平台上,您可以直接接触到100万的研发工程师和采购工程师,以及10万的活跃客户群体...详细>>

凭借我们强大的专业流量和尖端的互联网数字营销技术,我们承诺为原厂提供免费的产品资料推广服务。无论是最新的资讯、技术动态还是创新产品,都可以通过我们的平台迅速传达给目标客户...详细>>

我们不止于将线索转化为潜在客户。葫芦芯平台致力于形成业务闭环,从引流、宣传到最终销售,全程跟进,确保每一个potential lead都得到妥善处理,从而大幅提高转化率。不仅如此...详细>>