专利名称: | 利用激光雷达传感器的路面反射性检测 | ||
专利名称(英文): | Utilize the laser radar sensor of road-reflective detection | ||
专利号: | CN201510967226.3 | 申请时间: | 20151222 |
公开号: | CN105717514A | 公开时间: | 20160629 |
申请人: | 通用汽车环球科技运作有限责任公司 | ||
申请地址: | 美国密执安州 | ||
发明人: | I.斯泰因瓦斯奥尔尚斯基; Y.布达; A.利普森 | ||
分类号: | G01S17/88 | 主分类号: | G01S17/88 |
代理机构: | 中国专利代理(香港)有限公司 72001 | 代理人: | 陈国慧; 肖日松 |
摘要: | 本发明涉及利用激光雷达传感器的路面反射性检测。一种确定行驶道路的表面情况的方法。利用激光雷达系统来发射指向行驶道路中的表面的光束。在发射光束之后,分析激光雷达系统的光电检测器处的响应。响应于分析光电检测器处的响应而判断在行驶道路上是否存在降水物形式。响应于确定地面包括在行驶道路上的降水物形式而生成降水物指示信号。 | ||
摘要(英文): | A method of determining a surface condition of a road of travel. A light beam directed at a surface in the road of travel is transmitted utilizing a lidar system. A response is analyzed at a photodetector of the lidar system after transmitting the light beam. A determination is made whether a form of precipitation is present on the road of travel in response to analyzing the response at the photodetector. A precipitation indicating signal is generated in response to the determination that the ground surface includes a form of precipitation on the road of travel. |
1.一种确定行驶道路的表面情况的方法,所述方法包括以下步骤: 利用激光雷达系统发射指向所述行驶道路中的表面的光束; 在发射所述光束之后分析所述激光雷达系统的光电检测器处的响应; 响应于分析所述光电检测器处的响应,而确定在所述行驶道路上是否存在降水物的形式; 响应于确定地面包括在所述行驶道路上的降水物形式,而生成降水物指示信号。
2.根据权利要求1所述的方法,其中分析所述光电检测器处的响应包括确定在所述光电检测器处是否接收到反射信号,其中所述光电检测器没有接收到反射信号表明在所述行驶道路上存在降水物形式。
3.根据权利要求2所述的方法,其中与所述激光雷达系统配合地使用二次感测装置,用于增加确定所述道路的所述表面上的降水物的概率。
4.根据权利要求3所述的方法,其中所述二次感测装置确定所述道路的所述表面上的降水物的类型。
5.根据权利要求1所述的方法,其中所述响应包括在所述光电检测器处接收的光信号,其中相比于存在降水物时的预期反射信号,针对接收到的响应而增加所述光信号的散射。
6.根据权利要求5所述的方法,其中确定是否存在所述光信号的散射包括以下步骤: 对由所述光电检测器接收到的反射信号应用双向窗口; 对所接收到的反射信号的每个相应窗口应用特征提取技术; 响应于分析来自每个相应窗口的提取特征,识别在所述反射信号内是否存在散射。
7.根据权利要求6所述的方法,其中所述特征提取技术包括短信号统计。
8.根据权利要求6所述的方法,其中所述特征提取技术包括标准偏差。
9.根据权利要求6所述的方法,其中所述特征提取技术包括快速傅里叶变换系数。
10.根据权利要求6所述的方法,其中所述特征提取技术包括小波变换技术。
1.一种确定行驶道路的表面情况的方法,所述方法包括以下步骤: 利用激光雷达系统发射指向所述行驶道路中的表面的光束; 在发射所述光束之后分析所述激光雷达系统的光电检测器处的响应; 响应于分析所述光电检测器处的响应,而确定在所述行驶道路上是否存在降水物的形式; 响应于确定地面包括在所述行驶道路上的降水物形式,而生成降水物指示信号。
2.根据权利要求1所述的方法,其中分析所述光电检测器处的响应包括确定在所述光电检测器处是否接收到反射信号,其中所述光电检测器没有接收到反射信号表明在所述行驶道路上存在降水物形式。
3.根据权利要求2所述的方法,其中与所述激光雷达系统配合地使用二次感测装置,用于增加确定所述道路的所述表面上的降水物的概率。
4.根据权利要求3所述的方法,其中所述二次感测装置确定所述道路的所述表面上的降水物的类型。
5.根据权利要求1所述的方法,其中所述响应包括在所述光电检测器处接收的光信号,其中相比于存在降水物时的预期反射信号,针对接收到的响应而增加所述光信号的散射。
6.根据权利要求5所述的方法,其中确定是否存在所述光信号的散射包括以下步骤: 对由所述光电检测器接收到的反射信号应用双向窗口; 对所接收到的反射信号的每个相应窗口应用特征提取技术; 响应于分析来自每个相应窗口的提取特征,识别在所述反射信号内是否存在散射。
7.根据权利要求6所述的方法,其中所述特征提取技术包括短信号统计。
8.根据权利要求6所述的方法,其中所述特征提取技术包括标准偏差。
9.根据权利要求6所述的方法,其中所述特征提取技术包括快速傅里叶变换系数。
10.根据权利要求6所述的方法,其中所述特征提取技术包括小波变换技术。
翻译:技术领域
实施例涉及确定行驶路线的路面情况反射性。
背景技术
了解车辆所遇到的路面情况对于车辆的各种功能性而言是非常重要的。路面上的降水物可能导致车辆的各种控制问题。行驶道路上的雪、水或冰大大减小了车辆车胎和道路表面之间的摩擦系数,从而导致车辆稳定性问题。各种已知系统能够感测这样的情况,但是需要刺激来检测。例如,利用车轮打滑来感测道路上的降水物的系统可以检测车辆车轮何时具有车轮旋转速度的突然增加。虽然该操作对于识别路面上一些类型的降水物是非常良好的,但是问题在于降水物已经负面地影响了车辆操作。结果,车辆必须反应性地对车辆操作做出改变,以减小已经影响了车辆的降水物的影响。
在车辆在降水物上行驶之前识别路面情况允许车辆主动地启用车辆的各种安全驱动特征,或者对当前车辆操作做出改变,以减小影响车辆操作的降水物的变化。
发明内容
实施例的优点在于检测路面情况,其允许启用稳定性控制操作来缓解路面上的水/雪/冰。系统利用激光雷达技术来确定在光电检测器处是否接收到信号。可以通过分析在光电检测器处接收到的信号以及在光电检测器处不存在接收到的信号,来实现表面是否包括在行驶道路上的冰/雪/水的确定。可以使用各种技术来确定道路表面的表面上的冰/雪/水,例如没有接收到响应信号,通过使用滑行窗口分析接收到的信号所确定的响应信号接收具有增加的散射光束,以及检测回波信号中的虚假对象。
此外,可以与激光雷达系统一起使用其他的感测装置/系统,来提高路面情况以及路面上降水物类型的概率。
实施例想到确定行驶道路的表面情况的方法。利用激光雷达系统来发射指向行驶道路中的表面的光束。在发射光束之后,分析激光雷达系统的光电检测器处死亡响应。响应于分析光电检测器处的响应而判断在行驶道路上是否存在降水物形式。响应于确定地面包括在行驶道路上的降水物形式而生成降水物指示信号。
1.一种确定行驶道路的表面情况的方法,所述方法包括以下步骤:
利用激光雷达系统发射指向所述行驶道路中的表面的光束;
在发射所述光束之后分析所述激光雷达系统的光电检测器处的响应;
响应于分析所述光电检测器处的响应,而确定在所述行驶道路上是否存在降水物的形式;
响应于确定地面包括在所述行驶道路上的降水物形式,而生成降水物指示信号。
2.根据方案1所述的方法,其中分析所述光电检测器处的响应包括确定在所述光电检测器处是否接收到反射信号,其中所述光电检测器没有接收到反射信号表明在所述行驶道路上存在降水物形式。
3.根据方案2所述的方法,其中与所述激光雷达系统配合地使用二次感测装置,用于增加确定所述道路的所述表面上的降水物的概率。
4.根据方案3所述的方法,其中所述二次感测装置确定所述道路的所述表面上的降水物的类型。
5.根据方案1所述的方法,其中所述响应包括在所述光电检测器处接收的光信号,其中相比于存在降水物时的预期反射信号,针对接收到的响应而增加所述光信号的散射。
6.根据方案5所述的方法,其中确定是否存在所述光信号的散射包括以下步骤:
对由所述光电检测器接收到的反射信号应用双向窗口;
对所接收到的反射信号的每个相应窗口应用特征提取技术;
响应于分析来自每个相应窗口的提取特征,识别在所述反射信号内是否存在散射。
7.根据方案6所述的方法,其中所述特征提取技术包括短信号统计。
8.根据方案6所述的方法,其中所述特征提取技术包括标准偏差。
9.根据方案6所述的方法,其中所述特征提取技术包括快速傅里叶变换系数。
10.根据方案6所述的方法,其中所述特征提取技术包括小波变换技术。
11.根据方案6所述的方法,其中所述特征提取技术包括主成分分析。
12.根据方案6所述的方法,其中与所述激光雷达系统配合地使用二次感测装置,用于增加确定所述道路的所述表面上的降水物的概率。
13.根据方案12所述的方法,其中所述二次感测装置确定所述道路的所述表面上的降水物的类型。
14.根据方案5所述的方法,其中对所述提取特征应用分类器,从而识别所述路面情况。
15.根据方案1所述的方法,其中分析所述光电检测器处的响应包括确定在所述行驶道路上的反射表面中是否存在虚假对象。
16.根据方案15所述的方法,其中基于延伸超过距所述光束和所述道路的所述表面的交点的距离的距离,将所述虚假对象作为位于所述道路的所述表面之下的对象分析。
17.根据方案15所述的方法,其中距所述虚假对象的距离处于距所述道路的所述表面的预期距离的预定阈值之外。
18.根据方案15所述的方法,其中分析所述光电检测器处的响应包括确定在所述行驶道路上的反射表面中是否存在虚假对象,包括以下步骤:
使用平面拟合来识别地平面;
识别位于所述道路的所述表面下方的虚假对象点;
从由所述光电检测器接收到的多个反射光线收集虚假对象点,与所述道路的所述表面相交的所述多个反射光线处于所述路面的基本相同位置。
19.根据方案18所述的方法,其中与所述激光雷达系统配合地使用二次感测装置,用于增加确定所述道路的所述表面上的降水物的概率。
20.根据方案19所述的方法,其中所述二次感测装置确定所述道路的所述表面上的降水物的类型。
附图说明
图1是路面情况检测系统的框图。
图2是表示漫射路面的反射性质的示图。
图3是漫射路面的放大图。
图4是表示镜面路面的反射性质的示图。
图5是镜面路面的放大图。
图6a和图6b示出相应激光雷达回波信号,其示出不存在来自地面的激光雷达回波。
图7是用于检测道路的反射性质的信号散射分析技术的流程图。
图8是双向窗口特征提取技术的图示。
图9a和图9b示出与激光雷达射束的散射效果有关的激光雷达回波信号。
图10是用来识别道路的反射性质的虚假对象检测技术。
图11a和图11b示出了指示虚假对象的激光雷达回波信号。
具体实施方式
在图1中表示了路面情况检测系统10的框图。路面检测系统10利用激光雷达系统12(例如,转数计感测系统)。激光雷达是一种远程感测技术,其中对目标进行照射并且基于分析反射光来测量至对象的距离。
激光雷达系统12包括照射源14,例如激光。将激光校准至相应波长,并且能够将激光设定在指定脉冲长度和控制数据收集速度的重复频率。
激光雷达系统12还包括接收来自照射源14的反射光线的光电检测器16。
激光雷达系统12还包括处理器18,用于分析从光电检测器16获得的数据,并且用于确定道路表面情况的反射性质。激光雷达系统12可以进一步利用定位系统/导航系统,用于在车辆运动时识别表面情况的绝对位置。当车辆运动时,能够将激光雷达扫描与密集点云相结合(如果定位/导航系统是可用的或者存在能够用于估计自车运动的传感器),并且能够对点云曲面片应用相同的分析。这使得激光雷达系统能够得到大量关于车辆周围路面的信息。
可以使用存储器存储单元20来存储由光电检测器18收集的信息。存储器存储单元20存储由分类器利用来确定路面的数据,这将在下文详细地讨论。其他的感测装置22(例如雷达、视频)能够与激光雷达系统结合使用来验证路面的情况。
可以使用多个装置/系统24来使车辆操作能够在存在光滑道路情况时辅助驾驶员维持对车辆的控制,或者向车辆驾驶员提供通知或警告车辆驾驶员前方道路情况的详细信息。当在湿表面上行驶时车辆道路12上的降水物能够导致牵引力的减小。应该理解的是本文限定的术语降水物可以包括但不限于水、冰、雪或者能够导致车辆丧失牵引力的其他物质。置于车辆道路上的降水物减小了车辆车胎和车辆道路之间的摩擦系数,从而减小了车辆车胎和车辆道路之间的牵引力。可以通过任意如下手段来缓解牵引力的丧失,所述手段包括但不限于:使用可变制动力以使制动的制动表面上形成的降水物最少的自主制动控制件25;警告驾驶员将车辆速度降低到有利于环境情况的速度或通知驾驶员维持距前方车辆的较大停车距离的部件;稳定性牵引控制件26,进行速度控制以便在检测到降水物时禁止或约束巡航控制功能的激活27;驾驶员警告输出装置,警告驾驶员前方路面情况28;或者通信系统,用于利用专门车辆通信与其他车辆通信从而预先警告其他驾驶员路面情况29。
在图2和图3中示出车辆30,车辆30沿着行驶道路32行驶并且将激光射束34指向行驶道路32的表面。根据道路是漫射表面还是平坦的镜状表面,将确定光线如何从行驶道路32的表面被反射。图3示出了行驶道路32的漫射表面36的放大图。漫反射发生于激光射束从非镜面的表面反射时。漫反射是光以入射光线以多个角度反射的方式从表面的反射,而不是如镜面反射的情况那样仅以一个角度反射。由于如图所示入射光线以多个角度反射,所以一部分反射光线沿着朝向车辆的方向返回。光电检测器捕获返回光线并且能够测量从车辆到与漫射表面的交点的距离。基于预期回波与是否被接收到的关系,将辅助判断路面情况。
图4和图5示出车辆30,车辆30沿着行驶道路32行驶并且将激光射束34指向行驶道路32的表面,其中该表面是镜状表面38。具有镜状表面38的路面将导致镜面反射。镜面反射是光从表面的镜状反射,其中来自单个进入方向的入射光线的光被反射到单个射出方向。结果,因为关于路面反射角等于入射角,所以反射光线指向远离车辆的方向。通过识别路面是包括漫射表面还是镜面表面,可以通过车辆控制关于缓解路面情况做出决定。
车辆控制需要了解前方路面情况(即道路是湿的、被冰覆盖、还是干的)。这样的情况能够利用激光雷达系统并分析数据来察觉。如之前描述的激光雷达回波取决于其从何种性质的材料反射。湿/干/雪区域中的道路反射性质是明显不同的,并且因此能够使用激光雷达传感器来检测。例如,在下雨期间,路面中的坑洼被水填充并且可以表现得类似小镜子。如果激光雷达射束撞击湿/水表面,则能够发生下述效果:(1)没有回波返回到传感器检测器;(2)对于来自反射表面的数据,射束信号读数的散射较大;(3)错误对象会出现。本文中的下述描述将描述这些相应的效果及其分析。
图6a和图6b示出第一情形,其中不存在来自地面的激光雷达回波,这种情况能够通过实时地跟踪激光信号并且在预期有回波数据的地方发现未读取数据而容易地检测。图6a示出重叠在驾驶员看到的行驶道路图像上的激光雷达回波,并且图6b示出了头顶的激光雷达回波信号绘图。各条线代表用于特定传感器(例如IBEOLUX传感器)的相应激光射束。IBEOLUX传感器具有4层激光,且具有3.2度的竖直视野和12.5Hz、25Hz和40Hz中的任一个的扫描速率,但是,能够使用具有其他数量的激光射束的其他传感器。如图6a所示,元素40示出路面上的产生镜状表面的水。图6a和图6b中均示出了表明没有来自传输信号的回波信号的空白41。没有回波信号是由于激光射束弹离镜状表面并且反射到车辆前方的结果。因此,在回波激光雷达信号中出现空白。这样的情形可能发生于路边处,其中车辆系统可以包括寻找路缘的车道对中系统。在沿着行驶道路检测路缘的同时,判断预期存在的附近路缘线没有回波。由于道路的设计原因,使得路缘的表面在与道路方向正交的方向上具有负曲率,这导致路缘表面附近的积水。结果,激光雷达射束不返回某些点处的反射光线,并且随时间经过的图案表明图案在道路和路缘表面会合处断开。断开的图案指示路面上的水或其他镜状情况。因此,当期待回波信号而没有返回回波信号时,能够检测到镜面表面。
关于湿/雪表面激光雷达信号散射增加的第二情形,这种视觉效果能够通过使用信号处理和机器学习技术来检测。图7表示用于执行信号散射的分析的算法流程的方框图。
在方框42中,由双向窗口扫描第一信号并且针对每个窗口提取特征。由双向窗口扫描第一信号并且针对每个窗口提取特征。图8示出双向窗口。在图8中,在第i-1个窗口处分析相应窗口。移动窗口并且分析下一窗口(第i个窗口)。分析连续的窗口(第i+1个窗口)。
在方框43中,分析针对每个窗口提取的特征。所提取的特征包括但不限于例如STD等短信号统计或者测量距正态分布(例如峰态)的偏差、FFT系数及其统计值的任意其他统计值。此外,因为双向窗口信号由三维点构成,所以能够利用主成分分析(PCA)以及本征值及其比例来估计短窗信号散射。
除了FFT之外,还能够使用其他技术,例如小波变换。小波变换是时频变换,其利用数学过程来执行随时间变化的信号频率的信号分析。
在方框44中,将相应特征分类。最后的分类步骤能够由任意相应的分类器应用,所述分类器包括但不限于任意神经网络、支持向量机(SVM)、最近邻分类器等等。分类标签包括但不限于湿区域、冰区域、干区域和雪区域。可以使用深层神经网络技术将特征提取和分类步骤结合成一个步骤。
图9a和图9b示出与激光雷达射束的散射效果有关的激光雷达回波信号。如图9b所示,虽然存在回波信号,但是回波信号的几何形状是分散的。这种类型的信号使用上文指出的信号处理和机器学习技术来识别。
此外,其他传感器数据(例如摄像机、雷达、超声波)能够与激光雷达系统配合使用,从而辅助做出关于路面情况的协同决策。
图10示出第三情形,其中在道路的镜面中检测到虚假对象。如图10所示,激光雷达系统将光束发射到行驶道路32上。在路面上存在降水物50。针对降水物的路面上的光反射将具有基本等于入射光线角度的反射光线角度。行驶道路上的降水物50起到具有反射性质的镜子类型表面的作用。在由镜面发生反射之后,反射光线撞击车辆前方的对象52。从前方对象52弹开的光返回并且由传感器(多路)测量从而生成二次回声。该二次回声回波是三维点,其生成指示虚假/虚拟对象54的虚假警报信号。虚假对象被认为是位于地下的虚拟点,并且被投影到虚拟对象54上的表面下的与真实对象52的相同点,这是因为真实对象52和虚拟对象54是基本上相同的大小,但是预期到由于多次反射的原因而使二次脉冲的强度将较小。
检测虚假对象的过程如下所述。在步骤60中,利用稳健平面拟合技术(RANSAC)来确定地平面。例如RANSAC等技术通过使得数据移位和旋转以匹配xy平面和地平面来执行地面估计。
在步骤61中,识别位于地面之下的虚拟对象的虚假对象点。虚假对象点将具有地下点(z<0)。这对于例如坑洞等负对象是相同的。
在步骤62中,由激光雷达系统收集来自不同光线的虚假对象点。所收集的不同光线应该是当被投影到地面时来自基本相同位置。这对于真实对象也成立,但是对于道路的某些特征(例如坑洞)不成立。
在步骤63中,对在步骤62和63中所识别的性质进行协同分析,以便识别虚假对象检测。应该理解的是,路面和虚假对象之间的交叉处对应于路面的反射区域。这些相应的虚假对象点将与从第一脉冲获得的真实激光雷达点相一致。虚假对象的检测进一步使得能够通过应用虚假对象从路面的对称变换来重构真实对象。
应该理解的是,其他车辆子系统(例如基于摄像机的系统)可以与激光雷达系统配合使用,来提高正确地检测地平面之下的虚假对象的概率。
图11a和图11b示出了针对虚假对象位于信号中的情形的激光雷达回波信号。如图11a所示,车辆52正在被驾驶车辆的前方行驶。存在激光雷达回波信号,但是回波信号的相应部分位于比预期更远的距离处。在图11b中,激光雷达信号回波54进一步远离存在其他回波信号的位置而移位。这表明信号行进了更远的距离从而从车辆52反弹。因为相比于回波信号54,其他回波信号基本处于相同位置,所以确定该回波信号指示虚假对象,这表明存在镜状表面。
本文描述的所提出的技术能够在除了车辆应用之外的实施例中使用,来确定对象和具有不同反射性的背景之间的间隔,例如使用激光雷达进行海上船只检测。应该理解的是,上述技术不限于汽车应用,而是可以用于非汽车应用。
而且,能够将激光雷达扫描与密集点云相结合(如果自车运动传感器可用或者由其能够估计出自车运动),并且能够将相同的分析应用于点云曲面片,这将提供关于车辆周围的路面的完整信息。
虽然已经详细描述了本发明的某些实施例,但是本发明所涉及领域的技术人员将意识到用于实施由所附权利要求限定的本发明的各种替代设计和实施例。