技术应用

结构光视觉传感器的参数标定

发布时间:2019-11-04 00:00:00 责任编辑:xueqi

【导读】结构光视觉的优点包括非接触、信息量大、测精度高、抗干扰能力强。结构光视觉传感器参数的标定包括摄像机参数标定、结构光平面参数标定。
 
结构光视觉测量原理图
 
结构光视觉传感器的参数标定
 
我们不考虑镜头的畸变,将相机的成像模型简化为小孔成像模型,则特征点的图像坐标Pf 与其在摄像机坐标系下的三维坐标P 之间的关系可表示为:
 
结构光视觉传感器的参数标定
 
其中:(u,v)是特征点的图像坐标,(u0,v0) 光轴中心的图像坐标,(kx ky )是X 轴,Y 轴方向的放大系数,(xc yc zc) 是特征点在摄像机坐标系下坐标,  Mc 是摄像机内参数矩阵。
 
结构光视觉投影成像模型:
 
结构光视觉传感器的参数标定
 
设结构光在摄像头坐标系的平面方程为:
 
结构光视觉传感器的参数标定
 
依据激光条纹特征点图像坐标就可以得到其在摄像机坐标系下的三维坐标
 
结构光视觉传感器的参数标定
 
相机参数标定:
 
采用张正友提出的基于2D平面棋盘格的摄像机标定方法,利用Matlab摄像头标定工具完成相机参数的标定。
 
摄像机标定工具箱主窗口:
 
结构光视觉传感器的参数标定
 
用于摄像机标定的棋盘格图像:
 
结构光视觉传感器的参数标定
 
相关参考文献可以查看张正友的论文:
 
Zhang Z. A flexible new technique for camera calibration[J]. IEEE Transactions on pattern analysis and machine intelligence, 2000, 22(11): 1330-1334.
 
得到摄像机内参数矩阵:
 
结构光视觉传感器的参数标定
 
结构光平面参数标定:
 
首先,激光器投射结构光平面到平面棋盘格上形成激光条纹,并通过CCD 摄像机采集激光条纹图像。然后,对图像进行处理,提取激光条纹上的两个特征点。控制机器人按照一定的约束进行运动,从一个标定位置移动到另一个位置,从而产生两条不共线的激光条纹,利用上述相同的图像处理方法再次提取激光条纹上的两个特征点。最后,利用结构光平面上的四个点来确定结构光平面方程参数。该方法可以在摄像机参数标定过程中,同时完成结构光平面方程参数的标定。同时,该方法不需要加工高精度的三维标定靶标,也不需要手工测量,标定过程简单实用。
 
试验装备:
 
一个六自由度机器人,一个CCD 工业摄像机,一个激光器和一个平面棋盘格靶标。
 
结构光平面参数标定系统示意图:
 
结构光视觉传感器的参数标定
 
摄像机坐标系位于摄像机中心,而世界坐标系位于平面棋盘格靶标上。一个特征点在摄像机坐标系下坐标与其在世界坐标系下坐标之间的对应关系可以用下式来表达:
 
结构光视觉传感器的参数标定
 
标定过程如下:
 
(1)图像获取:
 
图像的获取是在摄机参数标定过程中同时完成。 首先将棋盘格放在工作台上, 在这个初始位置,利用摄像机采集一幅图,如图 (a) 所示 。保持摄像机和棋盘格的位置姿态不变,打开激光器让条纹投射到棋盘格上, 再采集一幅图像如图 (b) 所示:
 
结构光视觉传感器的参数标定
 
然后改变棋盘格和摄像机的相对位姿,使前后形成的两条激光条纹在空间上不共线,即可确定一个唯一的结构光平面。
 
结构光视觉传感器的参数标定
 
(2)图像处理:
 
图像处理的目的是提取激光条纹上特征点的图像坐标。
 
分为图像感兴趣区域(ROI)确定、自适应阈值分割、骨架细化和特征点计算。
 
1)图像ROI确定
 
通过观察图像看出,激光条纹大致平行于图像的u 轴,而且激光条纹处像素的灰度值高于图像中其它像素的灰度值,所以图像的ROI 可以通过对每行像素灰度值进行求和得到:
 
结构光视觉传感器的参数标定
 
2)阈值分割
 
阈值分割分为全局阈值分割、局部阈值分割和自适应阈值分割。最常用的自适应阈值分割是Otsu方法,该方法使用统计学的方法确定最优的阈值,适用于一般的图像,但是不太适合于棋盘格上激光条纹的分割。
 
根据图像中激光条纹的灰度值高于图像中其它像素的灰度值以及激光条纹所在区域比较集中的特点,利用图像ROI 内行像素灰度值之和计算激光条纹的自适应阈值:
 
结构光视觉传感器的参数标定
 
3) 骨架细化:
 
自适应阈值分割以后的激光条纹具有一定的宽度,直接处理计算量巨大而且精度较低,需要对图像进行骨架细化得到单像素的线。
 
采用下面文献中所提出的快速骨架细化方法:
 
结构光视觉传感器的参数标定
 
Pi分布情况如下:
 
结构光视觉传感器的参数标定
 
第二个迭代过程将上述条件的c、d条件更改为:
 
结构光视觉传感器的参数标定
 
4)特征提取:
 
选取激光条纹中心线上的两个点作为激光条纹的特征点,为了提高激光条纹中心线的提取精度,利用最小二乘法拟合方法对细化后的激光条纹直线进行处理。
 
结构光视觉传感器的参数标定
 
激光条纹特征点提取过程如下:
 
结构光视觉传感器的参数标定
 
标定棋盘格平面内任意一点与法向量关系
 
结构光视觉传感器的参数标定
 
由上图可知:
 
结构光视觉传感器的参数标定
 
由特征点的图像坐标Pf 与其在摄像机坐标系下的三维坐标P 之间的关系知:
 
结构光视觉传感器的参数标定
 
得到棋盘格上任意一点在摄像机坐标系下的zc 坐标
 
结构光视觉传感器的参数标定
 
得到激光条纹特征点在摄像机坐标系下的坐标值
 
结构光视觉传感器的参数标定
 
至此,得到四个激光条纹特征点的图像坐标,由上式得四个激光条纹特征点在摄像机坐标系下的坐标,由于三点确定一个平面方程,使用最小二乘法计算结构光平面方程如下:
 
结构光视觉传感器的参数标定
 
至此,完成结构光平面方程的参数的标定。
 
参考文献:基于结构光视觉的焊缝识别与跟踪技术研究[D]. 中国科学院自动化研究所. 中国科学院大学. 2019.
要采购相机么,点这里了解一下价格!

为您推荐

纳芯微推出 NSPAD3N,国产车规绝压传感器用于电池热失控监测 新品速递

纳芯微推出 NSPAD3N,国产车规绝压传感器用于电池热失控监测

纳芯微发布车规级 MEMS 绝压传感器 NSPAD3N,全链路国产供应链,满足 AEC-Q100;芯片内置两套热失控判定算法,支持主控休眠状态下低功耗监测、异常唤醒,85℃下采样电流<35μA;量程 40–400kPa 可定制、16 位 SPI 输出,搭载 256 字节 FIFO 记录压力历史,DFN-8 小型封装,特殊进气结构保护敏感芯体,适配新能源电池包 BMS 压力监测。

汽车电子 能源电路 互联技术 传感技术 传感器

人形机器人的 “神经系统”:多模态感知 + 确定性连接,构建时序统一的环境认知 技术应用

人形机器人的 “神经系统”:多模态感知 + 确定性连接,构建时序统一的环境认知

多模态感知是人形机器人适配真实人机环境的基础,而高性能确定性连接是感知融合的核心前提。视觉、触觉、力传感、IMU 等传感器持续产生海量数据,依靠分布式通信骨干网完成时序同步,避免延迟、抖动带来的失控与安全风险。当多模态感知与可靠通信结合,机器人才能形成连贯的环境认知,支撑稳定行走、安全交互与智能规划。

通信广电 传感技术 传感器

英特尔联合 Altera 开发实时传感器桥接方案,面向医疗、机器人等物理 AI 与边缘计算场景 业界新闻

英特尔联合 Altera 开发实时传感器桥接方案,面向医疗、机器人等物理 AI 与边缘计算场景

今日,英特尔与 Altera 宣布合作开发灵活的实时传感器桥接模块化参考方案,面向医疗健康、机器人等边缘计算与物理 AI 应用。当前边缘设备传感器数量持续增长,多接口、多源数据带来时序同步、带宽、实时性等集成难题。方案融合英特尔计算、连接与软件栈优势和 Altera FPGA 可编程能力,可灵活适配不同传感器配置与负载,支持 I/O 外扩、确定性实时处理,配套英特尔开放边缘平台 SDK 与 Altera 开发工具,帮助 OEM 厂商简化系统集成,缩短原型到量产周期,兼顾性能、功耗与成本,重点满足医疗器械、智能机器人的低延迟感知与控制需求。

医疗穿戴 电源管理 传感技术 传感器

Melexis MLX90636 全新上市:超小 CSP 封装 FIR 传感器,打通腕温到核心体温推算路径 新品速递

Melexis MLX90636 全新上市:超小 CSP 封装 FIR 传感器,打通腕温到核心体温推算路径

2026 年 11 月 11 日,迈来芯(Melexis)推出新一代非接触式远红外测温芯片 MLX90636。该器件采用 1.8×1.8×0.75mm 晶圆级 CSP 封装,在人体测温区间达到 ±0.2℃医疗级精度,可抵御环境温变与气流干扰,低功耗特性适配智能手表、手环、智能戒指等紧凑穿戴产品。在 MLX90632 基础上迭代升级,迈来芯同步启动腕温 - 核心体温推算算法研究,配套评估套件即将推出,为数字健康厂商提供从硬件到算法验证的完整支撑,芯片现已正式上市。

医疗穿戴 电源管理 传感技术 传感器 Melexis(比利时迈来芯)

Nordic 进军免许可 Sub‑GHz 通信:集成低功耗、安全与端侧 AI,适配水表资产追踪 业界新闻

Nordic 进军免许可 Sub‑GHz 通信:集成低功耗、安全与端侧 AI,适配水表资产追踪

低功耗无线物联网厂商 Nordic Semiconductor 正式进军免许可远距离 Sub‑GHz 赛道,推出集成超低功耗、安全机制与端侧 AI 的通信方案。Sub‑GHz 信号穿墙、地下表井通信能力突出,免许可频段无需运营商网络,水表、资产追踪器、楼宇传感器依靠单节电池即可长年工作。该方案归入 Nordic 芯片到云端平台,沿用原有 SDK、开发工具与云服务,以开放标准为主同时兼容存量私有协议,丰富其多协议无线产品矩阵。

通信广电 能源电路 传感技术 EMC安规 传感器 NORDIC

特别推荐

更多

行业动态

更多

技术应用

更多

选型替代

更多

产品信息

更多

热门搜索

更多

欢迎登录

没有账号,

账号注册

注册成功!

3S后自动为你跳转登陆