内置智能传感器处理单元的传感器ISM330IS 为边缘设备带来更强的人工智能

发布时间:2022-12-09  

在今年的德国纽伦堡SENSOR + TEST 2022大会上,与会者有幸见到了ISM330IS ——第一个内置处理单元(ISPU)的传感器意法半导体于 2022 年初发布这一技术。简单地说,ISPU是一种支持C语言的可编程嵌入式数字信号处理器 (DSP),能够运行机器学习和深度学习算法。因此,它是边缘的下一个发展方向,或者 ST 所说的“Onlife Era”时代。ISM330IS有一个单精度计算浮点单元,开运动传感器先河。

本文引用地址:

image.png

从一个想法到新一代传感器,ST克服了哪些挑战?

在这项研究启动期,ST发表了一篇研究在惯性传感器内集成机器学习核心的可行性论文。过去,传感器的作用就是收集数据,所有计算任务都必须在微控制器上完成,这种架构背后的原因比较简单,惯性传感器是小尺寸的低功耗设备。增加性能强大的处理器不仅会违反这些设计限制,还会带来巨大的系统集成和制造挑战。虽然在一个模块内整合了DSP 和加速度计与陀螺仪,但是ST 并未降低处理性能、内存容量和传感器的精准度。

image.png

首款配备机器学习核心的传感器有哪些非凡之处?

ST在2018 年发表的这篇论文具有开创性,因为它为首个包含八个并行决策树、运行机器学习算法的惯性传感器LSM6DSOX解决了市场推广的难题。本地运行应用同时功耗非常低,从不可能变成了可能。产品推出后,尤其是在将模块集成到 SensorTile.box 之后,新应用开始涌现。例如,用它开发的婴儿哭声检测器,当有婴儿被遗忘在车内时可以提示驾驶员。同样,伦敦大学学院两个项目基于此开发出了自动化站/坐监测和更便捷的数字听诊器,获得市场好评。

image.png

 

还有哪些传感器配备机器学习核心?

LSM6DSOX还标志着一个新开发者社区出现。ST在 GitHub网站提供了机器学习核心库,并提高Unico GUI 软件工具的可及性,帮助更多的希望利用 LSM6DSOX 的机器学习核心的程序员。此外,我们还发布了性能更强大的传感器。LSM6DSRX 有更好的性能,适用于虚拟现实耳机等要求更高的应用。ST还推出了 LSM6DSV16X,它具有增强的机器学习内核和更好的性能功率比,适用于功耗限制更严格的系统。因而,有机器学习核心的ST传感器在一定程度上加快了下一个自动化时代的到来,而 ISM330IS 在这一传奇中翻开了一个重要的新篇章。

image.png

从新处理核心到新应用

ISPU是用什么做的?

ISM330IS 的 ISPU提供 8 KB的数据RAM和32 KB的应用RAM,运行频率10 MHz,具有32 位 RISC哈佛架构、四级流水线、浮点单元和针对神经网络处理优化的16位长度指令集。此外,虽然处理器发出中断请求仅需四个时钟周期(Arm Cortex 内核通常需要15 个时钟周期),但也可以在一个时钟周期内处理 16 位乘法运算。它使用 SPI 或 I2C 与主控 MCU 通信,开发人员只需在主处理器启动时将 C 代码加载到 ISPU 的易失性存储器内即可。

1670567418183348.png

FPU 让应用程序能够在边缘设备上更灵活地运行推理算法。一旦满足条件,程序就会向微控制器发出中断请求。同样,与上一代核心相比,该架构使 ISPU 提高性能的同时,功耗仍维持在微瓦级别。因此,与之前机器学习核心的决策树相比,新产品是一个重大的飞跃,是一个更高效的系统。 此外,尽管具有强大的算力,但 ISM330IS 仍然适合市场标准的 3 mm x 2.5 mm x 0.83 mm LGA 封装。因此,采用新传感器,设计人员无需大幅修改 PCB布局。

ISM330IS是如何做到脱颖而出的?

机器学习应用越来越普及,很多人一想到机器学习,就会想到高存储容量、云计算服务器或高度并行的GPU 架构,有许多程序对运算性能要求确实很高,这使得它们与边缘处理不相容。然而,有些企业也知道,并非所有深度学习系统都需要这个级别的算力。因此,在手机等移动产品或工业设备本机上运行推理算法的应用越来越受欢迎。图像识别、异常检测和预测性维护都要求在低功率条件下有可靠的 AI 性能。同样,家庭无线安保系统摄像头可以用识别人脸或宠物,ISPU核心可以为移动系统常亮显示屏提供智能。

针对性能与功耗这一挑战,ISM330IS 是一个新的解决方案,因为它的高性能模式功耗仅为0.59 mA,在同等条件下,ISM330DHCX高达1.5 mA。ISM330DHCX功耗较高的部分原因是模块集成了性能更强大的陀螺仪等功能。然而,这些数字也显示了新产品的优化之处和处理器核心的能效。事实上,低功耗微控制器很少有 FPU,因为它们通常需要大量的电能,然而,ISM330IS却将功耗成功地控制在电池供电系统适用的水平。

image.png

文章来源于:电子产品世界    原文链接
本站所有转载文章系出于传递更多信息之目的,且明确注明来源,不希望被转载的媒体或个人可与我们联系,我们将立即进行删除处理。

相关文章

    性能强大的处理器不仅会违反这些设计限制,还会带来巨大的系统集成和制造挑战。虽然在一个模块内整合了DSP 和加速度计与陀螺仪,但是ST 并未降低处理性能、内存容量和传感器的精准度。   首款配备机器学习核心的传感器有哪些......
    性能强大的处理器不仅会违反这些设计限制,还会带来巨大的系统集成和制造挑战。虽然在一个模块内整合了DSP 和加速度计与陀螺仪,但是ST 并未降低处理性能、内存容量和传感器的精准度。 首款配备机器学习核心的传感器有哪些......
    汽车传感器有哪些 智能传感器十大应用;近年来,智能传感器在汽车电子系统中的应用范围越来越广泛。从实际情况来看,智能传感器系统主要包括测量探索、分析以及信息发布这三个阶段。 在测量探索阶段当中,智能传感器......
    性能强大的处理器不仅会违反这些设计限制,还会带来巨大的系统集成和制造挑战。虽然在一个模块内整合了DSP 和加速度计与陀螺仪,但是ST 并未降低处理性能、内存容量和传感器的精准度。 首款配备机器学习核心的传感器有哪些......
    汽车转速相关传感器有哪些种类;  汽车转速相关传感器按功能分:   发动机转速传感器   凸转轴转速传感器   变速器输入轴转速传感器   变速器输出轴转速传感器   车速传感器   轮速传感器......
    适用于侵蚀性气体) Q:有哪些触液材料? A:主体:铝;根据要求提供:不锈钢或塑料 传感器:硅、氧化硅、氮化硅、不锈钢、玻璃、 包封材料(Glob Top) 密封:FKM;根据要求提供:EPDM/FFKM 阀门......
    度、湿度、压力、速度、设备状态等,在生产过程中可用于实现自动化、高效率的生产。   3. 智能传感器智能传感器可测量物理量,如温度、湿度、光照度等,并将相关数据通过无线传输的方式实时上传至云端,实现......
    和压力)的设计理念,无论工厂流程中使用何种类型的现场总线或工业以太网,这些传感器都能与PLC进行通信。本文引用地址:温度传感器有哪些选择? 比较常见的温度传感器是2线、3线和4线电阻温度检测器(RTD......
    和压力)的设计理念,无论工厂流程中使用何种类型的现场总线或工业以太网,这些传感器都能与PLC进行通信。 温度传感器有哪些选择? 比较常见的温度传感器是2线、3线和4线电阻温度检测器(RTD)、热电......
    智能家居中涉及的传感器有哪些;  万物互联互通的物联网时代下,将人们生活、企业生产等各个环节紧密相连,并创造了全新的生态环境。同时,也推动了传感技术的发展与应用,让物体有了触觉、味觉和嗅觉,让物......

我们与500+贴片厂合作,完美满足客户的定制需求。为品牌提供定制化的推广方案、专属产品特色页,多渠道推广,SEM/SEO精准营销以及与公众号的联合推广...详细>>

利用葫芦芯平台的卓越技术服务和新产品推广能力,原厂代理能轻松打入消费物联网(IOT)、信息与通信(ICT)、汽车及新能源汽车、工业自动化及工业物联网、装备及功率电子...详细>>

充分利用其强大的电子元器件采购流量,创新性地为这些物料提供了一个全新的窗口。我们的高效数字营销技术,不仅可以助你轻松识别与连接到需求方,更能够极大地提高“闲置物料”的处理能力,通过葫芦芯平台...详细>>

我们的目标很明确:构建一个全方位的半导体产业生态系统。成为一家全球领先的半导体互联网生态公司。目前,我们已成功打造了智能汽车、智能家居、大健康医疗、机器人和材料等五大生态领域。更为重要的是...详细>>

我们深知加工与定制类服务商的价值和重要性,因此,我们倾力为您提供最顶尖的营销资源。在我们的平台上,您可以直接接触到100万的研发工程师和采购工程师,以及10万的活跃客户群体...详细>>

凭借我们强大的专业流量和尖端的互联网数字营销技术,我们承诺为原厂提供免费的产品资料推广服务。无论是最新的资讯、技术动态还是创新产品,都可以通过我们的平台迅速传达给目标客户...详细>>

我们不止于将线索转化为潜在客户。葫芦芯平台致力于形成业务闭环,从引流、宣传到最终销售,全程跟进,确保每一个potential lead都得到妥善处理,从而大幅提高转化率。不仅如此...详细>>