RZ/V2M应用于工业领域缺陷检测

发布时间:2023-09-28  

在电子制造业中是非常重要的应用。然而,由于存在的缺陷多种多样,传统的机器视觉算法很难对缺陷特征进行完全建模和迁移缺陷特征,致使传统机器视觉算法可重复使用性不是很大,并且需要区分工作条件,这将浪费大量的人力成本。因此,越来越多的工程师开始将深度学习算法引入领域,因为深度学习在特征提取和定位方面取得了非常好的效果。

本文引用地址:

本文将介绍电子深度学习算法在领域的应用,以PCB电路板缺陷检测为例。

在这里,我们提出了一种缺陷检测解决方案,使用YOLOv3-tiny深度学习算法。YOLOv3-tiny是一种轻量级的目标检测算法。YOLOv3-tiny的网络结构如下:

9.png

相关内容您可访问以下链接查看:

https://pjreddie.com/darknet/yolo/

与原来的YOLOv3模型相比,YOLOv3-tiny减少了一些层数和参数,提高了嵌入式设备上的推理速度和效率。该算法具有较高的实时性和良好的精度,非常适合工业缺陷检测应用。

该缺陷检测解决方案可以部署在RZ/V2M MPU芯片上。RZ/V2M是一款集成了DRP-AI硬件加速单元的的AI专用处理器,其硬件特性如下:

1695633514619259.png

RZ/V2M系统框图

高达4K分辨率的硬件ISP

● 具有高度的鲁棒性,产生稳定的图像,不受环境的影响

传感器和镜头控制,如自动曝光、白平衡、畸变校正、黑点校正、缺陷像素修正等

● 色彩质量增强,HDR,WDR,噪声衰减,如色彩校正、黑度校正等

● 色彩控制,如色彩空间转换、图像翻转、裁剪、整形等

视觉和AI能力

● DRP-AI硬件加速器,高精度FP16数据类型

● AI能效性能(低消耗、低发热量)

● 摄像头接口:2× MIPI CSI

视频及图像引擎

●  H.265/H.264 编解码器

● 编码:H.265 最高2160p30, H.264最高1080p60

● 解码:H.265 最高2160p30, H.264 最高1080p60

● 2D图像引擎:200 MPixels/s

● JPEG硬件编码器

● 显示:HDMI 1.4a

高速接口

● 1× Gigabit Ethernet

● 1×USB3.1 Gen1 Host/Peripheral

● 1× PCIe® Gen 2 (2 lanes)

● 2× SDIO 3.0

● 1× eMMC™ 4.5.1

基于以上硬件特性,使得RZ/V2M可以很好的支持工业缺陷检测,AI模型部署过程如下图所示:

1695633498237362.png

● ONNX是一种用于表示机器学习模型的开放格式。 

● ONNX定义了一组通用运算符,机器学习和深度学习模型的构建基块以及通用文件格式,使AI开发人员能够使用具有各种框架、工具、运行时和编译器的模型。

此应用程序在RZ/V2M MPU中的硬件设置如下:

1695633484798295.png

YOLOv3-tiny 缺陷检测解决方案部署在 RZ/V2M,具有低功耗(小于5W)、高性能推理效果的特点,RZ/V2M为52fps(不包括前处理和后处理)。

嵌入式缺陷检测不仅用于电子制造中的PCB缺陷检测,还具有广泛的应用场景,以下是一些常见示例:

工业自动化

在制造过程中,可以实时检测产品中的缺陷,例如不正确的产品组装、零件缺失或损坏。

农业领域

在农业生产中,它可用于检测作物或蔬菜中的缺陷,例如疾病,害虫或水果畸形。

安防监控

可用于安防监控系统中的缺陷检测,如检测建筑物或公共场所的异常物体、入侵行为或安全隐患。

医学成像

在医学领域,可应用于医学图像分析,检测疾病标志物、肿瘤或异常组织等。

车辆检测

在智能交通系统中,可用于车辆检测,如交通流量监控、非法车辆检测或停车场管理。

随着人工智能技术的不断进步,我们期待在工业制造、安防、智能零售、服务机器人等多个领域推出更多应用和解决方案。

原创:Ryan Chen  来源:

文章来源于:电子产品世界    原文链接
本站所有转载文章系出于传递更多信息之目的,且明确注明来源,不希望被转载的媒体或个人可与我们联系,我们将立即进行删除处理。

我们与500+贴片厂合作,完美满足客户的定制需求。为品牌提供定制化的推广方案、专属产品特色页,多渠道推广,SEM/SEO精准营销以及与公众号的联合推广...详细>>

利用葫芦芯平台的卓越技术服务和新产品推广能力,原厂代理能轻松打入消费物联网(IOT)、信息与通信(ICT)、汽车及新能源汽车、工业自动化及工业物联网、装备及功率电子...详细>>

充分利用其强大的电子元器件采购流量,创新性地为这些物料提供了一个全新的窗口。我们的高效数字营销技术,不仅可以助你轻松识别与连接到需求方,更能够极大地提高“闲置物料”的处理能力,通过葫芦芯平台...详细>>

我们的目标很明确:构建一个全方位的半导体产业生态系统。成为一家全球领先的半导体互联网生态公司。目前,我们已成功打造了智能汽车、智能家居、大健康医疗、机器人和材料等五大生态领域。更为重要的是...详细>>

我们深知加工与定制类服务商的价值和重要性,因此,我们倾力为您提供最顶尖的营销资源。在我们的平台上,您可以直接接触到100万的研发工程师和采购工程师,以及10万的活跃客户群体...详细>>

凭借我们强大的专业流量和尖端的互联网数字营销技术,我们承诺为原厂提供免费的产品资料推广服务。无论是最新的资讯、技术动态还是创新产品,都可以通过我们的平台迅速传达给目标客户...详细>>

我们不止于将线索转化为潜在客户。葫芦芯平台致力于形成业务闭环,从引流、宣传到最终销售,全程跟进,确保每一个potential lead都得到妥善处理,从而大幅提高转化率。不仅如此...详细>>