业界新闻

RZ/V2M应用于工业领域缺陷检测

发布时间:2023-10-24 00:00:00 来源:瑞萨 责任编辑:wenwei

【导读】缺陷检测在电子制造业中是非常重要的应用。然而,由于存在的缺陷多种多样,传统的机器视觉算法很难对缺陷特征进行完全建模和迁移缺陷特征,致使传统机器视觉算法可重复使用性不是很大,并且需要区分工作条件,这将浪费大量的人力成本。因此,越来越多的工程师开始将深度学习算法引入缺陷检测领域,因为深度学习在特征提取和定位方面取得了非常好的效果。


本文将介绍瑞萨电子深度学习算法在缺陷检测领域的应用,以PCB电路板缺陷检测为例。


在这里,我们提出了一种缺陷检测解决方案,使用YOLOv3-tiny深度学习算法。YOLOv3-tiny是一种轻量级的目标检测算法。YOLOv3-tiny的网络结构如下:


9.png


相关内容您可访问以下链接查看:

https://pjreddie.com/darknet/yolo/


与原来的YOLOv3模型相比,YOLOv3-tiny减少了一些层数和参数,提高了嵌入式设备上的推理速度和效率。该算法具有较高的实时性和良好的精度,非常适合工业缺陷检测应用。


该缺陷检测解决方案可以部署在RZ/V2M MPU芯片上。RZ/V2M是一款集成了瑞萨DRP-AI硬件加速单元的的AI专用处理器,其硬件特性如下:

 

1695633514619259.png

RZ/V2M系统框图


高达4K分辨率的硬件ISP


● 具有高度的鲁棒性,产生稳定的图像,不受环境的影响

● 传感器和镜头控制,如自动曝光、白平衡、畸变校正、黑点校正、缺陷像素修正等

● 色彩质量增强,HDR,WDR,噪声衰减,如色彩校正、黑度校正等

● 色彩控制,如色彩空间转换、图像翻转、裁剪、整形等


视觉和AI能力


● DRP-AI硬件加速器,高精度FP16数据类型

● AI能效性能(低消耗、低发热量)

● 摄像头接口:2× MIPI CSI


视频及图像引擎


●  H.265/H.264 编解码器

● 编码:H.265 最高2160p30, H.264最高1080p60

● 解码:H.265 最高2160p30, H.264 最高1080p60

● 2D图像引擎:200 MPixels/s

● JPEG硬件编码器

● 显示:HDMI 1.4a


高速接口


● 1× Gigabit Ethernet

● 1×USB3.1 Gen1 Host/Peripheral

● 1× PCIe® Gen 2 (2 lanes)

● 2× SDIO 3.0

● 1× eMMC™ 4.5.1


基于以上硬件特性,使得RZ/V2M可以很好的支持工业缺陷检测,AI模型部署过程如下图所示:


1695633498237362.png

 

● ONNX是一种用于表示机器学习模型的开放格式。 

● ONNX定义了一组通用运算符,机器学习和深度学习模型的构建基块以及通用文件格式,使AI开发人员能够使用具有各种框架、工具、运行时和编译器的模型。


此应用程序在RZ/V2M MPU中的硬件设置如下:

 

1695633484798295.png


YOLOv3-tiny 缺陷检测解决方案部署在 RZ/V2M,具有低功耗(小于5W)、高性能推理效果的特点,RZ/V2M为52fps(不包括前处理和后处理)。


嵌入式缺陷检测不仅用于电子制造中的PCB缺陷检测,还具有广泛的应用场景,以下是一些常见示例:


工业自动化


在制造过程中,可以实时检测产品中的缺陷,例如不正确的产品组装、零件缺失或损坏。


农业领域


在农业生产中,它可用于检测作物或蔬菜中的缺陷,例如疾病,害虫或水果畸形。


安防监控


可用于安防监控系统中的缺陷检测,如检测建筑物或公共场所的异常物体、入侵行为或安全隐患。


医学成像


在医学领域,可应用于医学图像分析,检测疾病标志物、肿瘤或异常组织等。


车辆检测


在智能交通系统中,可用于车辆检测,如交通流量监控、非法车辆检测或停车场管理。


随着人工智能技术的不断进步,我们期待在工业制造、安防、智能零售、服务机器人等多个领域推出更多应用和解决方案。


原创:Ryan Chen  来源:瑞萨



免责声明:本文为转载文章,转载此文目的在于传递更多信息,版权归原作者所有。本文所用视频、图片、文字如涉及作品版权问题,请联系小编进行处理。


推荐阅读:


低损耗、高结温!基本半导体混合碳化硅分立器件性能优势介绍

艾睿5G和Wi-Fi 6融合无线通信解决方案

如何利用碳化硅打造下一代固态断路器

热泵及其谐波电流解决方案

ams OSRAM营销副总裁Gerald Broneske:感知未来,用光学为未来交通发展引路


为您推荐

MathWorks 取得 TÜV 南德认证扩展,智能体 AI 融入 ISO 26262 汽车功能安全开发流程 业界新闻

MathWorks 取得 TÜV 南德认证扩展,智能体 AI 融入 ISO 26262 汽车功能安全开发流程

MathWorks 宣布扩展 MATLAB、Simulink 等工具的 TÜV 南德认证范围,新增依据 ISO 26262 制定的 AI 工具分类指南,成为首家为功能安全场景下 AI 辅助工程工作流提供评估指南的工具供应商。借助 Simulink Agentic Toolkit 与 Polyspace Agentic Toolkit,可将 AI 智能体嵌入基于模型的完整开发链路,完成模型搭建、评审、测试生成、代码缺陷检测等工作。方案基于 Model Context Protocol(MCP),兼容 GitHub Copilot、Gemini CLI、Claude Code 等主流 AI 平台,在引入 AI 提效的同时,保障汽车安全关键项目所需的可审计、可追溯能力。

汽车电子 EMC安规 测试测量 MathWorks

德州仪器推出 TICS100MOD 与 TIOM2212,扩充多协议工业通信产品组合 新品速递

德州仪器推出 TICS100MOD 与 TIOM2212,扩充多协议工业通信产品组合

达拉斯 11 月 5 日,德州仪器 (TI) 发布两款工业通信全新器件:TICS100MOD 多协议通信 SoM 以及 TIOM2212 双通道 IO‑Link 主站,进一步完善工业通信产品矩阵。TICS100MOD 基于 AM2612 MCU,单硬件可通过固件切换 EtherCAT、EtherNet/IP、Profinet 主流工业以太网协议;TIOM2212 IO‑Link 主站打通以太网到传感器、执行器的链路。依托 PRU‑ICSS 专有实时通信硬件,搭配认证量产软件栈、SDK 开发套件,帮助工程师简化多协议工业系统设计,降低硬件迭代与供应链风险,两款产品将亮相 2026 慕尼黑电子展。

通信广电 互联技术 测试测量 MCU TI(德州仪器)

打通终端接入链路|紫光展锐 T8300、T7300 助力 Entel D2C 卫星通信生态落地智利 业界新闻

打通终端接入链路|紫光展锐 T8300、T7300 助力 Entel D2C 卫星通信生态落地智利

手机直连卫星 D2C 是补齐地面通信盲区的关键技术。紫光展锐与智利头部电信运营商 Entel 完成 D2C 现场测试,搭载 T8300(5G)、T7300(LTE)两大平台,在真实卫星与地面混合网络环境下,验证卫星建链、消息收发、天地切换等核心能力。Entel 已认可本次测试成果,将其作为终端厂商接入当地 D2C 服务的技术参考文档,有效降低品牌厂商的适配难度与验证成本,加速智利地区手机直连卫星终端生态规模化。

通信广电 测试测量 紫光展锐

戴尔发布 Dell Pro Rugged 13 Extreme/14 坚固本 AI 就绪面向工业一线严苛场景 新品速递

戴尔发布 Dell Pro Rugged 13 Extreme/14 坚固本 AI 就绪面向工业一线严苛场景

戴尔科技集团正式推出 Dell Pro Rugged 13 Extreme、Dell Pro Rugged 14 两款全新坚固型笔记本,专为制造、油气、交通、公用事业、公共安全等领域一线人员打造。两款机型通过 MIL-STD-810H 测试,支持宽温运行、湿手 / 戴手套触控,搭载第三代英特尔酷睿 Ultra 处理器,可选 5G 专网、GPS、热插拔电池,兼顾坚固防护、AI 算力与持续联网能力,同时配套完善安全机制,方便企业 IT 团队规模化部署管理。

通信广电 能源电路 测试测量 Dell(戴尔)

Evident 推出 SilVIR‑RAY 检测器,赋能 FV5000 共聚焦显微镜四通道同步超分辨成像 新品速递

Evident 推出 SilVIR‑RAY 检测器,赋能 FV5000 共聚焦显微镜四通道同步超分辨成像

Evident 为 FLUOVIEW FV5000 共聚焦平台推出 SilVIR‑RAY 检测器,单次扫描可同步采集最多四个超分辨通道,规避传统逐通道采集带来的时间偏移问题,适配神经科学、细胞生物学活细胞动态观测;宽动态范围支持定量分析,可新机标配、老机型升级,不做超分辨时也可作为常规共聚焦检测器使用,将在 Neuroscience 2026 年会首秀。

测试测量

特别推荐

更多

行业动态

更多

技术应用

更多

选型替代

更多

产品信息

更多

热门搜索

更多

欢迎登录

没有账号,

账号注册

注册成功!

3S后自动为你跳转登陆