(19)中华人民共和国国家知识产权局
(12)发明专利申请
(10)申请公布号 CN 111563457 A(43)申请公布日 2020.08.21
(21)申请号 202010385052.0(22)申请日 2020.05.09
(66)本国优先权数据
201911404316.6 2019.12.31 CN
(71)申请人 成都理工大学
地址 610000 四川省成都市二仙桥东三路1
号(72)发明人 吴媛媛 叶铖铖 郑忠 (74)专利代理机构 昆明合众智信知识产权事务
所 53113
代理人 刘静怡(51)Int.Cl.
G06K 9/00(2006.01)G06K 9/34(2006.01)G06K 9/46(2006.01)
(54)发明名称
一种无人驾驶汽车的道路场景分割方法(57)摘要
本发明涉及无人驾驶汽车领域,是指一种无人驾驶汽车的道路场景分割方法,解决了现有技术中实时性差、受外界环境因素影响大的问题。本发明依次进行图像分割和道路提取,本发明将无人驾驶中的激光3D点云数据融入图像分割的过程,利用MASAC算法从三维激光点云数据中快速提取出地面区域,然后,采用meanshift聚类算法对视频图像进行块分割处理,最后拟合出道路边缘,从而分割出整个行车区域。本算法的优点在于既能够很好地保证系统的实时性要求,又能够在受外界环境因素影响较小的情况下精准地提取出完整的道路区域,为后续行车道路上的障碍物检测处理等研究提供了良好的基础。
G06K 9/62(2006.01)
权利要求书1页 说明书3页 附图2页
CN 111563457 ACN 111563457 A
权 利 要 求 书
1/1页
1.一种无人驾驶汽车的道路场景分割方法,其特征在于:依次进行图像分割和道路提取。
2.根据权利要求1所述的一种无人驾驶汽车的道路场景分割方法,其特征在于:所述图像分割具体的是
a利用MASAC算法从三维激光点云数据中提取出全部的路面区域;b对该区域进行下采样处理;c对该区域进行块分割处理。
3.根据权利要求2所述的一种无人驾驶汽车的道路场景分割方法,其特征在于:步骤C具体的是利用道路像素点的颜色与位置信息,采用Mean-shift算法采用均值漂移的迭代步骤进行块分割处理。
4.根据权利要求2或3的一种无人驾驶汽车的道路场景分割方法,其特征在于:还包括步骤d,对步骤c中的结果图再进行上采样,恢复图像信息。
5.根据权利要求4述的一种无人驾驶汽车的道路场景分割方法,其特征在于:所述道路提取是
采样过后的图像进行颜色掩模覆盖和canny滤波提取边缘;
对提取出的部分车道线信息和道路边缘信息进行hough拟合以得到完整的边缘;利用道路边缘线和车道线对行车区域进行提取。
2
CN 111563457 A
说 明 书
一种无人驾驶汽车的道路场景分割方法
1/3页
[0001]
技术领域
[0002]本发明涉及无人驾驶汽车领域,特别是指一种无人驾驶汽车的道路场景分割方法。
背景技术
[0003]目前用于行车道路分割的算法大致可分为三类:一是利用道路颜色特征与纹理特征,该类算法实现起来较为简单,但同时受天气、光照等环境因素的影响较大;二是利用视差原理对车道线进行拟合,根据车道线划分,缺点在于对车道线过于依赖,如果车道线不清晰或被遮挡,就无法实现分割的目的;三是利用神经网络训练分割模型,该类算法分割的准确性最好,但实现起来较为复杂,而且分割的结果直接取决于所训练模型的好坏,实时性不高。
[0004]亟待出现一种可解决上述问题的新型的道路场景分割算法。
发明内容
[0005]本发明提出一种无人驾驶汽车的道路场景分割方法,解决了现有技术中实时性差、受外界环境因素影响大的问题。
[0006]本发明的技术方案是这样实现的:一种无人驾驶汽车的道路场景分割方法,包括,依次进行图像分割和道路提取。[0007]进一步地,所述图像分割具体的是a利用MASAC算法从三维激光点云数据中提取出全部的路面区域;b对该区域进行下采样处理;c对该区域进行块分割处理。[0008]进一步地,步骤C具体的是利用道路像素点的颜色与位置信息,采用Mean-shift算法采用均值漂移的迭代步骤进行块分割处理。[0009]优选地,还包括步骤d,对步骤c中的结果图再进行上采样,恢复图像信息。[0010]进一步地,所述道路提取是(1)采样过后的图像进行颜色掩模覆盖和canny滤波提取边缘;(2)对提取出的部分车道线信息和道路边缘信息进行hough拟合以得到完整的边缘;(3)利用道路边缘线和车道线对行车区域进行提取。
[0011]本发明公开的一种无人驾驶汽车的道路场景分割方法,将无人驾驶中的激光3D点云数据融入图像分割的过程,首先利用MASAC算法从三维激光点云数据中快速提取出地面区域,然后利用道路区域像素点的颜色与位置信息,采用meanshift聚类算法对视频图像进行块分割处理,最后采用canny算子提取道路的部分车道线信息,并利用二次曲线拟合的方法拟合出道路边缘,从而分割出整个行车区域。本算法的优点在于既能够很好地保证系统的实时性要求,又能够在受外界环境因素影响较小的情况下精准地提取出完整的道路区域,为后续行车道路上的障碍物检测处理等研究提供了良好的基础。
3
CN 111563457 A
说 明 书
2/3页
附图说明
[0012]为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。[0013]图1:本发明的算法流程图;
图2:本发明的实验效果图。具体实施方式
[0014]下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
[0015]如图1本发明的算法流程图所示,本发明公开的一种无人驾驶汽车的道路场景分割方法,包括,依次进行图像分割和道路提取。[0016]进一步地,所述图像分割具体的是a利用MASAC算法从三维激光点云数据中提取出全部的路面区域; MSAC相较于RANSAC算法采用一种更准确的界限损失函数,缓解了RANSAC算法阈值选取过于敏感的问题。b对该区域进行下采样处理; c对该区域进行块分割处理。进一步地,步骤C具体的是利用道路像素点的颜色与位置信息,采用Mean-shift算法采用均值漂移的迭代步骤进行块分割处理。利用 Mean-shift算法采用均值漂移的迭代步骤,不断地将像素点的值漂移到它邻域的均值位置,最终将收敛于点最稠密的区域,应用于图像聚类时,则将点的“概率密度”定义为与漂移中心颜色的差异和位置的远近,颜色越相似,距离越近,则概率密度越大,经过不断迭代计算,最终将所有颜色相似位置相近的像素点标记为同一类,实现区域的块分割处理。[0017]优选地,还包括步骤d,对步骤c中的结果图再进行上采样,恢复图像信息;上采样的参数不能过大,要求尽可能保留区域中的车道线和道路边缘线信息。[0018]进一步地,所述道路提取是(1)采样过后的图像进行颜色掩模覆盖和canny滤波提取;颜色掩模覆盖需要根据车道线的颜色信息来确定一组颜色区间,保留该颜色区间内的图像信息,即保留车道线信息,排除场景中其他信息可能对检测造成的干扰;然后用Canny算子对图像进行边缘检测提取,Canny算子通过计算边缘的梯度幅度和方向来提取图像的边缘信息,得到车道线和道路边缘用于Hough拟合。(2)对提取出的部分车道线信息和道路边缘信息进行hough拟合以得到完整的边缘;Hough拟合是将直角坐标系与参数空间进行对应:直角坐标系下的直线和点分别对应于参数空间中的点和直线,即直角坐标系中的多点共线反映在参数空间中即为多条直线交于同一点,Hough变换通过检测参数空间中各个点的相交次数来提取直线,相交次数越多,它是直线的可能性就越大,提取相交次数最多的几个点,由于上一步的颜色掩模覆盖已经排除了部分可能对检测结果造成干扰的因素,因而此时检测到的直线即为图像中的车道线;(3)利用道路边缘线和车道线对行车区域进行提取;到车道线以后,利用直线上点的坐标求得直线方程并将其延长相交,由此界定完整的道路范围,实现道路区域的完整检测与提取。
4
CN 111563457 A[0019]
说 明 书
3/3页
本发明公开的一种无人驾驶汽车的道路场景分割方法,将无人驾驶中的激光3D点
云数据融入图像分割的过程,首先利用MASAC算法从三维激光点云数据中快速提取出地面区域,然后利用道路区域像素点的颜色与位置信息,采用meanshift聚类算法对视频图像进行块分割处理,最后采用canny算子提取道路的部分车道线信息,并利用二次曲线拟合的方法拟合出道路边缘,从而分割出整个行车区域。本算法的优点在于既能够很好地保证系统的实时性要求,又能够在受外界环境因素影响较小的情况下精准地提取出完整的道路区域,为后续行车道路上的障碍物检测处理等研究提供了良好的基础。[0020]本发明中的算法主要分为图像分割和道路提取两个部分,首先利用MASAC算法从三维激光点云数据中提取出全部的路面区域,对该区域进行下采样处理以便节省后续算法的处理时间,然后利用道路像素点的颜色与位置信息,采用meanshift算法对该区域进行块分割处理,对结果图再进行上采样以尽可能恢复图像信息,其中,颜色相似并且位置相近的像素点会被标记为同一类,因此道路区域与非道路区域得以区分开来,在道路条件较好并且没有阴影、天气等因素影响的情况下,经过聚类后的图像已经能很好地分割出完整的行车道路区域,但考虑到多数情况下的道路条件,依然需要后续的处理。接着对上采样过后的图像进行颜色掩模覆盖和canny滤波提取,主要是为了减少图像中其他部分对车道线和道路边缘检测的干扰,提高准确性。对提取出的部分车道线信息和道路边缘信息进行hough拟合以得到完整的边缘,最后利用道路边缘线和车道线对行车区域进行提取。[0021]如图2本发明的实验效果图所示,本发明在kitty数据集上的结果表明,该算法能够将道路区域与非道路区域做出有效分割,排除了非道路区域对检测可能产生的干扰,最后分割提取出的道路是一块完整的区域,避免了光照条件不一致、路面状况不一致、阴影遮挡、天气变化等因素造成的分割提取不完整的情况,同时,算法尽可能满足了车载系统对实时性的要求,并具有较好地鲁棒性,能够很好地适用于结构化道路中的分割,为后续行车道路上的障碍物检测处理等研究提供了基础。[0022]当然,在不背离本发明精神及其实质的情况下,熟悉本领域的技术人员应该可以根据本发明作出各种相应的改变和变形,但这些相应的改变和变形都应属于本发明所附的权利要求的保护范围。
5
CN 111563457 A
说 明 书 附 图
1/2页
图1
6
CN 111563457 A
说 明 书 附 图
2/2页
图2
7