自动驾驶“加速”,车载红外热像仪在多传感器融合中的应用


多传感器融合是自动驾驶的必由之路。实现高级别的辅助驾驶、自动驾驶,需要多种传感器相互配合,共同构建汽车的感知系统。车载红外热像仪探测的是物体表面辐射的红外能量,在低照度、雨雪、雾霾、沙尘等场景条件下,依旧可以清晰成像,可有效弥补其他传感器不足,提升驾驶安全性。


自动驾驶“加速”,车载红外热像仪在多传感器融合中的应用可见光在极端条件下成像受到明显影响


高级别辅助驾驶和自动驾驶,若依赖单一传感器进行感知测距等工作,可能出现错误感知、漏感知、感知精度低等问题。使用多类传感器分别获取不同的感知信息,信息之间相互补充,可显著提高系统的冗余度和容错性,保证决策的快速性和正确性。


联合感知通过结合各个传感器的优点,达到1+1>2的效果。如下图所示,红外传感器结合激光雷达,不但能够准确获取环境信息,而且能获得准确的深度信息。


自动驾驶“加速”,车载红外热像仪在多传感器融合中的应用

红外雷达联合成像


传感器联合感知能够有效防止误检和漏检并且获得更多环境信息。如下方图片所示,由于车辆遮挡,雷达传感器未能完全感知出所有目标。而在联合红外2D感知结果后,实现了对于周围环境的完全感知。


自动驾驶“加速”,车载红外热像仪在多传感器融合中的应用

夜间红外2D感知结果

单独依靠红外进行感知,无法准确获得障碍物的三维坐标


自动驾驶“加速”,车载红外热像仪在多传感器融合中的应用

△ 基于激光雷达的环境感知结果

单独依靠雷达进行感知,当遇到障碍物遮挡时

无法准确感知物体


自动驾驶“加速”,车载红外热像仪在多传感器融合中的应用

多传感器联合感知

联合感知有效结合各传感器的优点,实现完全感知


如下方图片所示,走路和骑电动车的行人由于体积较小,反射数据数量有限,难以被有效感知。而在联合红外2D感知结果后,骑行者和行人能够被正确感知。


自动驾驶“加速”,车载红外热像仪在多传感器融合中的应用

夜间红外2D感知结果


自动驾驶“加速”,车载红外热像仪在多传感器融合中的应用

基于激光雷达的环境感知结果

走路和骑电动车的行人由于体积较小,反射数据数量有限

难以被激光雷达有效感知


自动驾驶“加速”,车载红外热像仪在多传感器融合中的应用

△ 多传感器联合感知

联合红外2D感知结果后,周围环境被完全感知


从技术层面上来说,红外热成像相比可见光摄像头、激光雷达、毫米波雷达等其他传感器而言,优势在于具有夜视能力以及受雨雪、雾霾、沙尘影响小,同时红外热成像对生命体的感知非常灵敏,可作为夜间、恶劣天气辅助驾驶或者增加自动驾驶安全性和可靠性的极佳选择和补充。


睿创微纳深耕车载红外夜视领域多年,是国内汽车红外市场的先行者,多年来积极推动红外在汽车行业的应用。公司在红外传感器技术、芯片封装技术、红外专用芯片处理技术等方面均保持领先优势,为车载红外夜视产品提供有利支撑。旗下Asens系列等汽车红外热像仪产品,通过IATF16949车规体系认证,在自动驾驶、汽车辅助驾驶(ADAS)、特种车辆应用等领域,皆拥有广阔的应用前景,目前已在不同类型客户的场景得到应用。



更多精彩内容



开启多维感知新征程!睿创微纳发布自研短波红外探测器芯片、机芯及整机


新突破!红外真彩转换算法再升级:热成像&可见光视频流畅转换


睿创微纳与图森未来达成战略合作,汽车红外热像仪全天候赋能自动驾驶卡车


睿创微纳(股票代码:688002.SH)是领先的、专业从事专用集成电路、特种芯片及MEMS传感器设计与制造技术开发的国家高新技术企业,具有完全自主知识产权,为全球客户提供性能卓越的MEMS芯片、ASIC处理器芯片、红外热成像与测温全产业链产品、激光、微波产品及光电系统。


睿创产品广泛应用于夜视观察、医疗防疫、智慧工业、无人机载荷、自动驾驶、安消防、物联网、人工智能、机器视觉等领域。


睿创微纳致力于打造中国最有价值的特种芯片企业,成为世界领先的智慧感知技术解决方案提供商。睿创微纳将承载“以技术进步为客户创造价值,让人们从更多维度发现世界之美”的使命,在持续拓展人类感知能力的征途上留下自己的脚印。

自动驾驶“加速”,车载红外热像仪在多传感器融合中的应用
自动驾驶“加速”,车载红外热像仪在多传感器融合中的应用

原文始发于微信公众号(睿创微纳):自动驾驶“加速”,车载红外热像仪在多传感器融合中的应用

艾邦现组建汽车雷达交流群,整合雷达厂、芯片、材料、设备等产业链上下游企业,以推动激光雷达行业发展 新闻速览|美国首款激光雷达量产车为Lucid Air,搭载激光雷达的威马M7将于22日发布

作者 zhu, linglong