充分释放客户端AI的潜力

发布时间:2023-11-08  

一场关于本地计算设备的变革即将来临

在这个技术飞速发展的时代,云已成为人工智能(AI) 发展无处不在的基石。云计算承载着AI,以一种润物细无声的方式渗透进人们生活的方方面面。AI将以势不可挡的趋势在云端继续蓬勃发展;而与此同时,它也将存在于用户未来的笔记本电脑、台式电脑及其他个人计算终端设备。

了解客户端人工智能(On-Client AI

AI处理从云端到边缘的演变将产生深远影响,它将重新定义人们与这一强大技术的交互方式并从中受益。这种新的范例被称为客户端AI(on-client AI),即直接在用户的本地计算设备上部署并执行AI进程。

客户端AI使海量处理能力更靠近终端用户,让用户无需依赖云计算基础设施就能使用AI的强大性能。这种适当规模的AI将使联网设备变得更加强大和有效。本地AI处理的优势在于安全性、速度和成本。

隐私和安全

使用AI生成的数据历来都往返于云端。虽然这有利于提高便利性和连接性,但也引发了隐私和安全问题。客户端AI是朝着更加安全的数字世界所迈出的一大步。本地处理意味着用户不必再担心个人身份信息(PII)和知识产权会暴露于云端的潜在威胁之下。用户对PII的许可和保护本质上是位于本地的,因此客户端AI有望促进用户隐私保护与合规。

速度和效率

快速响应在数字时代至关重要,而客户端AI几乎可以提供即时结果。从帮助用户整理文件到增强摄像头功能,客户端AI有潜力做到在不影响设备处理能力的情况下快速产生结果。

成本效益

在数据方面,每个字节都有相应的成本,将数据传输到云端和从云端传输数据的成本都很高。从单个用户层面,这些数据传输和存储成本看起来似乎微不足道,但从整体范围考虑,它们会“积沙成塔”。在本地处理可以最大程度地减少数据传输需求,进而降低云计算资源的成本。

开发更加智能的联网设备

客户端AI的主要目标之一是在智能手机和其他移动设备上运行大语言模型(LLM)。AI加持的移动设备和个人电脑将给终端用户和开发者带来巨大变化,新一代智能PC已呼之欲出,它们将具备实现客户端AI所需的处理能力。

推动客户端AI发展的技术进步有可能将大规模AI模型的部署从云端转移到个人设备,从而使用户能够在笔记本电脑或智能手机上随时随地运行复杂的机器学习算法。比如,在工作站的单个GPU上运行一个70亿参数的大语言模型可能既耗时,又成本高昂。如果能够选择使用客户端AI运行这些大语言模型,那将彻底改变用户与设备的交互方式。

有许多技术使得在用户设备上运行大型机器学习模型和其他AI应用成为可能。其中最有前景的技术之一是“模型蒸馏 (Model Distillation)”,该技术能够训练较小的模型模仿较大模型的行为。较小的模型可以部署在用户的设备上,而较大的模型则留在云端。 

当然,客户端AI将会补充而非取代云端AI处理。

云计算的优势在于可扩展性、易访问性和性能等。而本地设备上的AI处理将能够克服云计算的一些局限性,如隐私、数据传输成本、延迟等。随着客户端AI设备的发展,用户将能够根据具体的工作负载需求,在云计算和本地处理之间进行切换。

但客户端AI处理将对软硬件架构提出新的要求,包括专为运行机器学习应用而设计的新型GPU和CPU等。要想实现客户端AI,还需要有新的框架和平台促进本地设备端AI处理的开发。

为下一代解决方案提供支持

AI正在离终端用户越来越近。随着AI算法的改进,使用芯片支持设备端AI(如生成式AI)的方式也在发生变化。片上处理能力的持续提升将推动下一代客户端平台和终端生态系统的发展,届时AI处理将分布在外设、终端、边缘和云端。

如果所开发的客户端平台带有能够运行AI处理的芯片,则将解锁大量新的应用,为远程协作会议到智能安全解决方案等一切应用提供支持。自适应用户界面、自动支持等生成式AI体验都将成为未来个人计算的一部分。云与本地计算的这一融合将实现由AI驱动的个性化、系统优化以及预测性操作,从而带来无缝衔接且更加优质的用户体验。

这些差异化的体验仅仅是未来个人计算的开始。当能够在客户端加速机器学习算法的硬件出现时,AI模型将变得更加高效并能够在传统的联网设备上运行。新一代客户端AI应用将逐渐从概念化为现实,直至触手可及,让我们做好准备,迎接重新定义的个人计算体验。

戴尔科技集团

戴尔科技集团致力于帮助企业和个人构建数字化未来,改进他们的工作、生活和娱乐方式,为客户提供面向数据时代全面和创新的产品、技术、解决方案及服务组合。

文章来源于:电子创新网    原文链接
本站所有转载文章系出于传递更多信息之目的,且明确注明来源,不希望被转载的媒体或个人可与我们联系,我们将立即进行删除处理。

相关文章

    科技一直都专注了解基础架构、用户行为及营运需求的演变,以便在采用新科技的所有阶段保护已知及未知的风险。趋势科技的技术已获得超过 175 个国家的法规认证,是最能因应信息保安法规与数据主权保护的领导厂商。无论......
    泄露大约 241 万条日本客户数据,丰田被调查; 据业内媒体报道,上周日本个人信息保护委员会宣布,根据个人信息保护法对汽车公司进行行政指导调查,因为丰田的一家子公司的大约 241 万条......
    少中国企业机构所面临的挑战。暴露面管理还可协助中国企业机构遵守敏感数据保护和关键基础设施方面的网络安全法规。 中国的隐私保护 中国的隐私保护主要受《中华⼈⺠共和国个⼈信息保护法》(以下简称个⼈信息保护......
    优先采用安全可信的软件、工具、计算和数据资源,同时指出提供生成式人工智能产品或服务应当遵守法律法规的要求,尊重社会公德、公序良俗。 除此之外涉及个人信息的应承担个人信息处理者的法定责任,履行个人信息保护......
    能力的测评。 中国信通院泰尔终端实验室依据T/TAF 161-2023《移动智能终端个人信息保护规范》、FT-Z09-0020-01《新型移动智能终端系统安全技术要求》等标准要求,对HarmonyOS......
    一改此前对新技术的保守态度,自上而下积极拥抱生成式AI —— 日本政府去年4月成立了AI战略小组,该小组以内阁府为中心,加入的省厅包括经济产业省、总务省、文部科学省、数字厅、个人信息保护委员会,负责讨论与AI相关......
    合理布置,阶段性增加临时回收点、临时转运堆场供给。 四、优化电子产品消费环境 10. 切实加强隐私保护。加快完善个人信息保护法律法规,严格落实手机、智能家居、可穿戴设备等电子产品消费者信息保护......
    消息给另一部手机。它采用搭载先进人工智能技术的HarmonyOS 4,实现了多项智慧功能,如隔空手势控制、智感支付、AI信息保护等。它还采用了开创性的‘同心设计’,在视......
    码和数据与主机系统及主机系统所有者隔离,保护代码和数据的安全,同时确保代码完整性并进行证明。中国于2020年将数据定义为一种生产要素,希望通过数据交换和处理的方法来激活数据价值。《中华人民共和国个人信息保护法》(以下简称《个人信息保护......
    安全管理体系和ISO/IEC 27018公有云个人信息保护管理体系认证证书。阿里巴巴集团副总裁、瓴羊智能CEO朋新宇从BSI亚太区董事总经理林劲手上接过相关证书。 林劲认为,获得ISO/IEC......

我们与500+贴片厂合作,完美满足客户的定制需求。为品牌提供定制化的推广方案、专属产品特色页,多渠道推广,SEM/SEO精准营销以及与公众号的联合推广...详细>>

利用葫芦芯平台的卓越技术服务和新产品推广能力,原厂代理能轻松打入消费物联网(IOT)、信息与通信(ICT)、汽车及新能源汽车、工业自动化及工业物联网、装备及功率电子...详细>>

充分利用其强大的电子元器件采购流量,创新性地为这些物料提供了一个全新的窗口。我们的高效数字营销技术,不仅可以助你轻松识别与连接到需求方,更能够极大地提高“闲置物料”的处理能力,通过葫芦芯平台...详细>>

我们的目标很明确:构建一个全方位的半导体产业生态系统。成为一家全球领先的半导体互联网生态公司。目前,我们已成功打造了智能汽车、智能家居、大健康医疗、机器人和材料等五大生态领域。更为重要的是...详细>>

我们深知加工与定制类服务商的价值和重要性,因此,我们倾力为您提供最顶尖的营销资源。在我们的平台上,您可以直接接触到100万的研发工程师和采购工程师,以及10万的活跃客户群体...详细>>

凭借我们强大的专业流量和尖端的互联网数字营销技术,我们承诺为原厂提供免费的产品资料推广服务。无论是最新的资讯、技术动态还是创新产品,都可以通过我们的平台迅速传达给目标客户...详细>>

我们不止于将线索转化为潜在客户。葫芦芯平台致力于形成业务闭环,从引流、宣传到最终销售,全程跟进,确保每一个potential lead都得到妥善处理,从而大幅提高转化率。不仅如此...详细>>