红外传感技能不依赖光源,不受雾霾、雨雪等恶劣景象的影响,通过热辐射成像,可以提高汽车全时感知能力,提升驾驶安全。
最近几年,从智驾到座舱,都有红外传感技能的运用,本文就来谈谈红外热成像技能。

什么是红外热成像;红外热成像事理和核心部件;红外热成像上风和不敷;红外热成像在自动驾驶中的运用红外热成像范例的企业。

一文熟悉车载红外热成像技能

图1,来源lynred官网

01 什么是红外线热成像?

自然界中,凡是温度大于绝对零度(-273℃)的物体都能辐射红外线,它和可见光、紫外线、X射线、伽玛线、宇宙线和无线电波一起,构成了一个完全连续的电磁波谱。
红外线的波长在0.76μm至1000μm之间,比红光更长,且肉眼不可见。

图2,来源睿创微纳招股书

红外热成像技能将不可见的红外辐射转换成可供肉眼不雅观察的红外热图像,并且能反响出目标表面的温度分布状态,温度越高红外线能量越大。
不同物体乃至同一物体不同部位的辐射能力和它们对红外线的反射强弱不同。
利用物体与背景环境的辐射差异以及物体本身各部分辐射的差异,红外热像图能够呈现景物各部分的辐射起伏,从而显示出景物的特色。

图3,可见光&红外热成像比拟

02 红外技能成像事理

红外热像仪通过探测目标物体的红外辐射,然后经由光电转换、电旗子暗记处理及数字图像处理等手段,将目标物体的温度分布图像转换成视频图像。

图4,来源睿创微纳招股书

大略来说,红外图像转换成可见图像分三步进行,第一步是利用对红外辐射敏感的红外探测器把红外辐射转变为微弱电旗子暗记,该旗子暗记的大小可以反响出红外辐射的强弱;第二步是利用后续电路将微弱的电旗子暗记进行放大和处理,从而清晰地采集到目标物体温度分布情形;第三步是通过图像处理软件对上述放大后的电旗子暗记进行处理,得到电子视频旗子暗记,电视显像系统将反响目标红外辐射分布的电子视频旗子暗记在屏幕上显示出来,得到可见图像。

核心部件:红外探测器

红外热像仪的核心部件是用来探测、识别和感知红外辐射的红外探测器,探测器水平直接决定了终极形成的可见图像的清晰度和灵敏度。

红外探测器可以分为制冷型探测器和非制冷型探测器,详细比拟如下:

类型

特点

运用处景

制冷型探测器

基于光电效应,也称光子型探测器。
该型探测器需在液氮低温状况下事情,须要配置制冷器,具有灵敏度高、浸染间隔远的特点,但设备体历年夜、功耗大、寿命短。

紧张运用于航天、船舰等高端领域。

非制冷型探测器

基于热敏材料温升后的物理性子变革,也称热探测器。
该型探测器可以在常温下利用,具有轻便、构造大略、低本钱、低功耗、龟龄命的上风,但灵敏度低,不雅观测间隔较短。

可以知足一样平常军事需求及大部分民用需求。
车载红外技能一样平常采取该类型探测器。

03 红外热成像上风和不敷

和目前常用的摄像头、雷达等比较,红外热成像有着明显的上风:

1、对生命体有更好的识别能力:任何高于绝对温度(-273℃)的生命体都会散发热量,由红外热成像事理得知,它填补了可见光传感器的不敷,得以更好的保护行人和小动物。

2、弱光或无光环境下成像能力强:由于红外技能不依赖光芒,因此在雨雾、烟尘、隧道、夜晚等可见光差,或者无可见光的场景下,成效效果依然比较好。

图6,来自网络

3、无惧眩光

红外只吸收中长波信息,不吸收可见光波段信息,夜晚会车等强弱光交替场景仍能清晰成像,感知功能不会受到影响。
这也是夜间利用比较常见的一个场景,如下图:

图7,来自网络

不过,红外技能也有弊端:

1、比拟可见光信息丰富的纹理、清晰的图像边缘,红外图像只有亮度信息,无彩色信息,边缘模糊、细节不清晰。
比如一个站立的猴子和登高的人同时站在路中间,红外成像可能无法区分谁是猴子谁是人。

2、受到红外图像的成像事理限定,温差不大的物体之间热辐射值也类似,反响到图像中即是背景信息灰度值差异不大,造成红外图像比拟度较低。
比如两个人并排站在一起,二者的身体轮廓非常模糊,险些很难分辨。

3、由于红外探测器阵列数少,探测单元的的体积受限,因此红外图像分辨率比较低。

4、红外技能在事情过程中存在各种噪声(可见光成像也存在这个问题),导致其信躁比特殊低,呈现的噪点很多,甚至图像模糊。

04 红外热成像在自动驾驶中的运用

目前智能驾驶利用的摄像头、雷达、激光雷达,都是通过可见光来获取信息的,紧张是依赖可见光传感器吸收物体反射的光芒或其自身发射的光芒,然后把光旗子暗记转换成电旗子暗记,进而通过图像处理器转化成图像。
众所周知,可见光依赖光照,当碰着能见度低或碰着障碍物时,如雾霾、雨雪、沙尘等景象下,在弱光、无光条件下如黑夜、隧道等场景,可见光成像系统将无法有效的从背景中创造目标物体,这就须要红外技能的补充了。

多传感器领悟是自动驾驶的必由之路,车载红外传感器可以不依赖光源,在低照度、雨雪、烟尘、雾霾等恶劣环境时,依旧可以清晰成像,有效提升全时感知能力,填补其他传感器不敷,提升驾驶安全。
红外技能在汽车上有广泛的运用,可以帮助车辆实现360°实时监测车外环境、可以在智能驾驶赞助层面实现多传感器领悟、可以与车辆AEB功能领悟提升制动效果,还可以在数字座舱中实现驾驶员疲倦驾驶、身份识别等功能。

图8,可见光在极度条件下成像受到明显影响,来自网络

智能汽车若依赖单一传感器,可能会涌现感知精度低、漏感知、缺点感知的情形,多传感器领悟可以获取不同的感知信息,信息之间相互补充,达到1+1>2的效果,可显著提高系统的冗余性和容错性,提高决策的效率和准确度。

如图9、图10所示,由于车辆遮挡,激光雷达未能完备感知出所有目标,而在联合红外2D感知结果后,实现了对付周围环境的完备感知(图11),有效防止了误检和漏检,并得到了更多的环境信息。

左图9:夜间红外2D感知结果,来自网络 右图10:基于激光雷达的环境感知结果,来自网络

图11,多传感器联合感知,来自网络

再如上图12、图13所示,走路和骑电动车的行人由于体积较小,纯挚利用激光雷达的话,反射数据数量有限,难以被有效感知。
而在联合红外2D感知结果后,骑行者和行人能够被精确感知(图14)。

左图12:夜间红外2D感知结果,来自网络 右图13:基于激光雷达的环境感知结果

图14 多传感器联合感知,来自网络

从技能层面上来说,红外热成像比较可见光摄像头、激光雷达、毫米波雷达等其他传感器而言,上风在于具有夜视能力以及受雨雪、雾霾、沙尘影响小,同时红外热成像对生命体的感知非常灵敏,可作为夜间、恶劣景象赞助驾驶或者增加自动驾驶安全性和可靠性的极佳选择和补充。

05 红外热成像范例的企业

1艾睿光电

睿创微纳是领先的、专业从事专用集成电路、特种芯片及MEMS传感器设计与制造技能开拓的国家高新技能企业,具备多光谱传感研发、多维感知与AI算法研发等能力,为环球客户供应性能卓越的MEMS芯片、ASIC处理器芯片、红外热成像与测温百口当链产品、激光、微波产品及光电系统。

其子公司艾睿光电科技专注于红外成像技能和产品的研发制造,具有完备自主知识产权,致力于为环球客户供应专业的、有竞争力的红外热成像产品和行业办理方案。
紧张产品包括红外焦平面探测器芯片、热成像机芯模组和运用终端产品。

2022年1月,艾睿光电发布 IR-Pilot 汽车红外热成像全场景办理方案,推出256×192、384×288、640×512、1280×1024、1920×1080多个分辨率的车载红外热成像摄像头,可以知足多种分辨率、多种视场角、多种探测间隔的运用需求。
此外,IR-Pilot系列产品拥有精准生物测温能力,可运用于智能座舱,供应具有隐私保护的车内人员行为、车内生命体征监测等功能。

2023上海车展,多款搭载艾睿光电红外产品的车型亮相,包括比亚迪仰望U8、大运远航系列、滴滴自动驾驶等。
此外艾睿光电还和图森未来、踏歌智行、 智加科技达成互助协议,将红外热成像运用于物流卡车、矿用车等领域。

2轩辕智驾

武汉轩辕智驾科技有限公司成立于2016年7月,是武汉高德红外株式会社旗下全资子公司。
依托于集团的红外百口当链布局,自研自产、核心技能安全可控的底层支撑,致力于将远红外技能运用于智能汽车,主营产品有N-Driver系列红外摄像头、COIN系列一元红外芯、AI算法盒,用在高等智能驾驶系统、智能座舱中。

据悉,轩辕智驾已经拿下东风“猛士科技”、广汽埃安、陕汽重卡等多个红外夜视系统前装项目。

3广州飒特

广州飒特红外专注于红外热像仪产品的研制、生产和发卖,拥有业内领先的自主核心技能与持续研发能力, 是中国首家民营红外热像仪研制生产企业,并完成海内第一台民用红外热电视产品。

在AWE2023家电与消费电子展上,飒特红外展出了“NV628车载夜视赞助系统”。
NV628基于远红外镜头及DSP微处理器,搭配红外数据图像细节增强技能(DDE)、AI行人识别算法,可识别500米间隔的车辆,120米间隔的行人。

4Veoneer维宁尔

驶等新兴市场。
Veoneer致力于设计并制造最前辈的硬件、软件和电子系统,使驾驶更安全,并供应自动驾驶可靠性及可行性的办理方案,产品有约束掌握系统(RCS)、主动安全系统和制动系统、ADAS掌握器、Lidar、驾驶员检测系统等。

维宁尔是环球车载红外热成像系统量产的代表,基于FLIR 机芯的热成像传感系统(Night Vision)被配置在:奔驰S400、奥迪A6、奥迪A8、奥迪Q7、宝马7系、凯迪拉克CT6、标致508L、DS7、大众辉昂、大众途锐等车型上。

目前维宁尔的热成像传感系统已经发展至第四代。
相较于三代产品,第四代产品搭载FLIR BOSON 640紧凑型长波红外热像仪机芯,尺寸缩小50%,重量减轻50%,并增强了视野和探测间隔,加强了人、车和物的探测识别算法,支持夜间 AEB 办理方案,支持L4级自动驾驶。

5大立科技

大立科技前身为1984年景立的浙江省测试技能研究所,是专业从事非制冷红外焦平面探测器、红外热成像系统、智能巡检机器人、惯性导航光电产品研制的高新技能企业。
是海内少数技能自主可控、完备知识产权、独立研发;从生产热成像核心器件、机芯组件到整机系统制造,并具有完百口当链的专业制造商之一。
设有杭州、上海和北京三个技能研发中央,是海内唯一实现量产双技能路线(非晶硅与氧化钒)非制冷焦平面红外探测器的红外企业。

大立科技的车载EX系列产品,在东风猛士、一汽解放等车型上广泛运用。
目前最新产品便是 EX-VI系列。

6北方广微

北方广微成立于 2006 年 7 月,从属于北方夜视科技集团有限公司。
公司紧张从事非制冷型红外焦平面探测器及机芯组件的研发和生产,其产品广泛运用于军用装备、电力、石化、冶金、建筑、消防、公共安全及交通夜视等领域。

7久之洋

久之洋公司成立于2001年,紧张从事制冷/非制冷红外热像仪、激光测距/测照仪、星体跟踪器、特种光学元件的研发、生产与发卖,并可供应系统级光学系统的办理方案,曾完成我国首台非制冷红外热成像仪、首台连续变焦反扫红外热成像仪的研制。

8FLIR System

美国菲力尔(FLIR Systems) 成立于1978年,是高性能低本钱机载运用红外(热)成像系统的倡导者,其产品广泛运用于热成像、态势感知与安防领域。
FLIR 通过对多家公司收购,不断丰富产品、扩大市场,目前在环球红外市场霸占率第一。

FLIR在车载红外领域,紧张便是为主机厂、零部件供应商供应热成像机芯产品。
据麦姆斯咨询数据,FLIR通过和Autoliv的互助,已经为奔驰、奥迪、通用等供应超过70W个红外热成像机芯。

9AdaSky

ADASKY是一家以色列公司,致力于开拓用于提升车辆安全和感知运用的智能高分辨率热感系统(LWIR),以及智能城市道路办理方案。

2018年发布车载远红外办理方案“Viper”,已经通过了 ASPIC 和 ISO 26262认证。
Viper采取机器学习算法软件与远红外摄像头相结合的方案,除了专用集成电路(ASIC),AdaSky还与与意法半导体公司(STMicroelectronics)互助研发了一款图像旗子暗记处理器(ISP)芯片。
据称此芯片可以让Viper实现无快门技能,724小时全天候持续事情。

10Stoneridge-Orlaco

荷兰Stoneridge-Orlaco是商用和工业车辆的摄像头和监控系统领域的市场领导者。

2017年以来,Orlaco成为Stoneridge lnc.的一部分,该公司是汽车,中型和重型卡车以及越野车领域的高质量电气和电子组件,模块和系统的设计商和制造商。

11ULIS

ULIS 为 Sofradir Group 下属子公司,设立于 2002 年。
ULIS 在欧洲、亚洲及北美市场均有覆盖,其产品广泛运用于安防、测温、国防、户外休闲等传统领域,并致力于开拓智能建筑、道路安全及汽车赞助驾驶等新兴领域。
ULIS 母公司Sofradir Group 有超过 30 年的红外成像研发及生产履历。

12Lynred

2019年6月4日,红外探测器研发生产的法国Sofradir公司与ULIS公司发布官宣:合并成为新的组织和公司Lynred。
Sofradir和ULIS拥有超过35年设计、制造和发卖红外成像传感器的履历,通过各种技能(MCT、InGaAs、微测辐射热计探测器)开拓覆盖全体红外光谱(SWIR、MWIR、LWIR和VLWIR)的传感器。
Lynred产品涉及六大市场:航空航天、户外休闲、安防监控、测温、汽车工业, 机器视觉。

06 小结

随着汽车智能化的发展,随着国产化的不断打破,红外热成像本钱逐步走低,大规模上车成为可能,期待有一天,红外传感器也和摄像头、雷达一样,成为智能汽车的标准件。

参考资料:

1.睿创微纳招股解释书;

2.立足红外拓展微波射频领域,打造多维感知龙头;

3.红外夜视「加速上车」,高手云集 | 盘点车载红外夜视厂家

4.红外热成像加速“上车”:开启智能驾驶新蓝海

5.自动驾驶“加速”,车载红外热像仪在多传感器领悟中的运用

6.深度解剖广汽埃安“环球创始”的红外智驾技能