技术应用

自动驾驶中的多传感器融合

发布时间:2021-03-05 00:00:00 责任编辑:lina

【导读】多传感器信息融合(Multi-sensor Information Fusion,MSIF),就是利用计算机技术将来自多传感器或多源的信息和数据,在一定的准则下加以自动分析和综合,以完成所需要的决策和估计而进行的信息处理过程。
    
多传感器融合面临的主要挑战是如何将收集来的大量数据集中在一起,并做出正确决策。
 
1. 多传感器融合
 
自动驾驶中的多传感器融合
 
多传感器信息融合(Multi-sensor Information Fusion,MSIF),就是利用计算机技术将来自多传感器或多源的信息和数据,在一定的准则下加以自动分析和综合,以完成所需要的决策和估计而进行的信息处理过程。
 
多传感器信息融合技术的基本原理就像人的大脑综合处理信息的过程一样,将各种传感器进行多层次、多空间的信息互补和优化组合处理,最终产生对观测环 境的一致性解释。
 
在这个过程中要充分地利用多源数据进行合理支配与使用,而信息融合的最终目标则是基于各传感器获得的分离观测信息,通过对信息多级别、多方面组合导出更多有用信息。
 
这不仅是利用了多个传感器相互协同操作的优势,而且也综合处理了其它信息源的数据来提高整个传感器系统的智能化。
 
2. 融合体系
 
自动驾驶中的多传感器融合
 
在信息融合处理过程中,根据对原始数据处理方法的不同,信息融合系统的体系结构主要有三种:集中式、分布式和混合式。
 
1、集中式:集中式将各传感器获得的原始数据直接送至中央处理器进行融合处理,可以实现实时融合,其数据处理的精度高,算法灵活,缺点是对处理器要求高,可靠性较低,数据量大,故难于实现。
 
2、分布式:每个传感器对获得的原始数据先进行局部处理,包括对原始数据的预处理、分类及提取特征信息,并通过各自的决策准则分别作出决策,然后将结果送入融合中心进行融合以获得最终的决策。分布式对通信带宽需求低、计算速度快、可靠性和延续性好,但跟踪精度没有集中式高。
 
3、混合式:大多情况是把上述二者进行不同的组合,形成一种混合式结构。它保留了上述两类系统的优点,但在通信和计算上要付出较昂贵的代价。但是,此类系统也有上述两类系统难以比拟的优势,在实际场合往往采用此类结构。
 
3. 多传感器融合特点
 
多传感器融合 系统具有四个显著的特点:
 
①信息的冗余性:对于环境的某个特征,可以通过多个传感器(或者单个传感器的多个不同时刻)得到它的多份信息,这些信息是冗余的,并且具有不同的可靠性,通过融合处理,可以从中提取出更加准确和可靠的信息。
 
此外,信息的冗余性可以提高系统的稳定性,从而能够避免因单个传感器失效而对整个系统所造成的影响。
 
②信息的互补性:不同种类的传感器可以为系统提供不同性质的信息,这些信息所描述的对象是不同的环境特征,它们彼此之间具有互补性。
 
如果定义一个由所有特征构成的坐标空间,那么每个传感器所提供的信息只属于整个空间的一个子空间,和其他传感器形成的空间相互独立。
 
③信息处理的及时性:各传感器的处理过程相互独立,整个处理过程可以采用并行导热处理机制,从而使系统具有更快的处理速度,提供更加及时的处理结果。
 
④信息处理的低成本性:多个传感器可以花费更少的代价来得到相当于单传感器所能得到的信息量。另一方面,如果不将单个传感器所提供的信息用来实现其他功能,单个传感器的成本和多传感器的成本之和是相当的。
 
4. 在自动驾驶中的应用
 
自动驾驶车上使用了多种多样的传感器,不同类型的传感器间在功用上互相补充,提高自动驾驶系统的安全系数。自动驾驶要求传感器融合具备一个必须的性质——实时性。
 
MSDF面临的主要挑战是如何将收集来的大量数据集中在一起,并做出正确决策。如果MSDF出错,意味着下游阶段要么没有必要的信息,要是使用了错误的信息做出了错误的决策。
 
可以看到,自动驾驶汽车会通过安装在车身周围的摄像头收集视觉数据,也会通过雷达(激光雷达、毫米波雷达等)来收集诸如周围物体运动速度的数据,但是这些数据是从不同角度来描述现实世界的同一样或不同样的物体。
 
使用越多的传感器,对计算能力的要求就越高,这意味着自动驾驶汽车必须搭载更多的计算机处理器和内存,这也会增加汽车的重量,需要更多的功率,还会产生更多的热量。诸如此类的缺点还有很多。
 
智能汽车的显著特点在于智能,意思就是说汽车自己能通过车载传感系统感知道路环境,自动规划行车路线并控制车辆到达预定目标。
 
目前而言,车载感知模块包括视觉感知模块、毫米波雷达、超声波雷达、360°环视系统等,多源传感器的协同作用识别道路车道线、行人车辆等障碍物,为安全驾驶保驾护航。因此,感知信息也需要融合,感知信息也需要相互补充。
 
5. 多传感器融合的四个关键方法
 
自动驾驶中的多传感器融合
 
Harmonize
 
假设有两种不同的传感器,称它们为传感器X和传感器Z。它们都能够感知自动驾驶汽车的外部世界。
 
在现实世界中存在一个物体,这个物体可能是人,也可能是车,甚至是一条狗,传感器X和传感器Z都能够检测到这个物体。
 
这就意味着传感器对这个物体进行了双重检测,这种双重检测意味着两种不同类型的传感器都有关于该物体的数据报告,对于该物体有两个维度不同地认知。
 
假设,传感器X表示该物体高6英尺,宽2英尺;传感器Z表示该物体以每秒3英尺的速度正朝着自动驾驶车辆方向移动。
 
结合两个传感器采集到的数据,就可以得出一条相对准确的信息:有一个高约6英尺,宽2英尺的物体正在以每秒钟3英尺的速度移动。
 
假设这两自动驾驶汽车上只安装了X传感器,那么就无法得知该物体的大小;若Z传感器坏了,那么就只有物体的大小信息,无法检测该物体的运动状态。这也就是最近业内广泛讨论的“在自动驾驶汽车上应该安装哪些传感器”的问题。
 
此前,特斯拉埃隆•马斯克(Elon Musk)旗帜鲜明地声称,特斯拉不会安装激光雷达。
 
尽管马斯克自己也认为,L5自动驾驶不会通过激光雷达来实现这个想法最终可能被验证为错误的,这依旧没有改变马斯克的决定。
 
一些反对的声音称,不配备激光雷达的特斯拉,无法通过其他的传感器获取如同激光雷达效果相同的感官输入,也无法提供补偿和三角测量。
 
但是另一些支持者认为,激光雷达不值得花费如此高昂的费用成本,不值得为其增大计算能力,也不值得为其增加认知时间。
 
Reconcile
 
在同一个视场(Field of View,FOV)内,假设传感器X探测到一个物体,而传感器Z没有探测到。注意,这与物体完全在传感器Z的FOV之外的情况有很大的不。
 
一方面,系统会认为传感器X是正确的,Z是错误的,可能是因为Z有故障,或者有模糊探测,或者是其他的一些什么原因。另一个方面,也许传感器X是错误的,X可能是报告了一个“幽灵”(实际上并不存在的东西),而传感器Z报告那里没有东西是正确的。
 
Integrate
 
假设我们有两个物体a和b,分别在传感器X和传感器Z的视场FOV内(a在X视场内,b在Z视场内)。也就是说,Z无法直接检测到a,X也无法直接检测到b。
 
目前,想要实现的效果是,能否将X和Z的报告整合在一起,让它们在各自的视场内探测物体同时,判断是否为X视场中的物体正在向Z视场移动,预先提醒Z将有物体进入探测区域。
 
Synthesize
 
第四种方法Synthesize是将感知数据融合在一起,你可能会遇到这样的情况,传感器X和传感器Z都没有在各自的视场内探测到物体。
 
在这种情况下,没有传感器知道这个物体的存在,但是可以通过一些其他的感观数据,比如声音,间接地弄清楚在视场之外的物体情况。自动驾驶汽车是时刻运动的,所以要求这种预判是瞬间发生的,像上文提到的一样,是实时的。
 
多传感器信息融合技术应用至今,有着非常多的应用方法,在所有方法当中较为成熟的方法包括了聚类分析法、证据理论法、DS 算法、最优理论法等。
(来源:传感器世界,作者:清研车联)
 
 
 
免责声明:本文为转载文章,转载此文目的在于传递更多信息,版权归原作者所有。本文所用视频、图片、文字如涉及作品版权问题,请电话或者邮箱联系小编进行侵删。
 
推荐阅读:
小体积有大作为,基于纳米传感器技术的疾病快速诊断实现方式探索
IOTE将带您挖掘物联网亿万市场,领略六大展区展示的物联网头部企业新产品、新科技
如何利用SiC高效驱动电动车?
当软件去抖动不合适时,如何实现开关和继电器硬件去抖动?
硬件工程师必看:包地与串扰
要采购传感器么,点这里了解一下价格!

为您推荐

纳芯微推出 NSPAD3N,国产车规绝压传感器用于电池热失控监测 新品速递

纳芯微推出 NSPAD3N,国产车规绝压传感器用于电池热失控监测

纳芯微发布车规级 MEMS 绝压传感器 NSPAD3N,全链路国产供应链,满足 AEC-Q100;芯片内置两套热失控判定算法,支持主控休眠状态下低功耗监测、异常唤醒,85℃下采样电流<35μA;量程 40–400kPa 可定制、16 位 SPI 输出,搭载 256 字节 FIFO 记录压力历史,DFN-8 小型封装,特殊进气结构保护敏感芯体,适配新能源电池包 BMS 压力监测。

汽车电子 能源电路 互联技术 传感技术 传感器

意法半导体推出大众市场汽车安全组合传感器,加速 ADAS 落地 业界新闻

意法半导体推出大众市场汽车安全组合传感器,加速 ADAS 落地

【导读】2026 年 11 月 3 日,意法半导体(ST)正式推出首款面向大众乘用车市场的汽车安全组合传感器。本次新品是 ST 完成恩智浦汽车 MEMS 传感器业务整合后的首批量产产品,单芯片集成多轴加速度计与陀螺仪,符合 ISO 26262 车规安全标准,可用于安全气囊、车辆稳定控制等主动与被动安全系统,同时承诺长达 15 年供货周期,降低车企迭代风险。Omdia 数据显示,ADAS 带动车载 IMU 市场年增速达 17.7%。

汽车电子 传感技术 传感器 ST(意法半导体)

车载高速 SerDes 两条开放路线对比:MIPI A-PHY 与 OpenGMSL 及芯片实现思路 竞品比对

车载高速 SerDes 两条开放路线对比:MIPI A-PHY 与 OpenGMSL 及芯片实现思路

软件定义汽车正在重塑整车的电子电气架构,车用高速串行器/解串器(SerDes)技术的价值正在全面凸显。高阶自动驾驶与ADAS需要多个摄像头、激光雷达、毫米波雷达实时回传海量感知数据;智能座舱则需要把高清乃至4K显示内容送往车内大屏。这些传感器、显示屏与域控制器、中央计算平台之间,需要一种高带宽、低时延、强抗干扰、可覆盖数米线缆距离的点对点串行链路——也就是车用SerDes技术。

安防监控 汽车电子 互联技术 传感技术 传感器

TDK 推出 M704/M705 高压 NTC 温度传感器,面向充电桩、光伏、数据中心电源 新品速递

TDK 推出 M704/M705 高压 NTC 温度传感器,面向充电桩、光伏、数据中心电源

TDK 新推出 M704 与 M705 两款探针式 NTC 温度传感器,补齐高压场景测温需求。M704 耐压可达 4000V AC,采用塑封结构,适配 PCB 自动化贴装;M705 耐压 2500V AC,最高工作温度 180℃,金属环形接片设计热耦合好、响应迅速。两款产品 R25 均为 10kΩ,B 值 3988K,适合光伏逆变器、充电桩、数据中心 UPS、PSU 等电力电子设备的精准测温,兼顾绝缘安全、装配便利性与长期稳定性。

汽车电子 能源电路 电源管理 传感技术 传感器 TDK

英飞凌推出 XENSIV™ TLx49012 自校准数字角度传感器,面向汽车与工业电机控制 新品速递

英飞凌推出 XENSIV™ TLx49012 自校准数字角度传感器,面向汽车与工业电机控制

英飞凌推出 XENSIV™ TLx49012 系列霍尔数字角度传感器,包含四款产品,面向汽车与工业领域高要求电机控制场景。伴随车载无刷直流电机渗透率提升、机器人产业持续扩张,高精度低延迟角度传感方案成为电机控制系统的关键。该传感器搭载系统自校准能力,无需客户自研校准算法与外接参考编码器,支持轴向与非轴向安装,角度误差小于 0.1°,时延低至 1.5µs,提供多类输出接口;车规版本满足 ISO 26262 ASIL B 功能安全标准,适配汽车、工业自动化等不同电机平台,汽车版 TLE49012 与工业版 TLI49012 现已供货。

汽车电子 传感技术 测试测量 传感器 Infineon(英飞凌)

特别推荐

更多

行业动态

更多

技术应用

更多

选型替代

更多

产品信息

更多

热门搜索

更多

欢迎登录

没有账号,

账号注册

注册成功!

3S后自动为你跳转登陆