《非结构化道路环境理解》由会员分享，可在线阅读，更多相关《非结构化道路环境理解（38页珍藏版）》请在金锄头文库上搜索。
1、非结构化道路图像理解非结构化道路图像理解一一.道路图像理解综述道路图像理解综述1.道路检测道路检测2.连续帧道路检测3.道路偏离检测4.道路识别与跟踪1.道路检测1.1 基于特征的方法基于特征的方法1.1.1 道路区域检测道路区域检测 1.1.2 道路边缘检测1.2 基于模型的方法1.2.1 建立道路模型 1.2.2 提取车道线像素 1.2.3 拟合车道模型 1.1 基于特征的方法基于特征的方法基于特征的方法不需要道路的几何结构信息, 主要利用图像中道路区域的颜色、纹理、边缘等低级特征从图像中检测出路区域或路边缘。1.1.1 道路区域检测灰度直方图聚类的方法用颜色特征检测道路纹理特征概率 道路
2、区域检测可以看成是一个图像分割问题。图像预处理：选定感兴趣区域, 消除噪声，边缘增强边缘抽取：常用的边缘算子包括Canny、Roberts、Laplace、Prewitt、Sobel等算子二值化:阈值的选取Hough变换可以得到连续的道路直线1.1.2 道路边缘检测1.2 基于模型的方法1)建立道路模型对道路形状的假设2)提取车道线像素边缘检测、哈夫变换、模板匹配3)拟合车道模型直接拟合、哈夫变换和似然函数方法。2.连续帧道路检测 将图像处理限制在上一帧图像的结果的邻域可以显著提高道路检测的速度, 降低对硬件的要求, 满足实时性要求。感兴趣区域上帧边缘k邻域作为下次边缘检测的区域在感兴趣区域进
3、行边缘检测3.道路偏离检测 道路偏离检测是在道路检测的基础上, 不仅给出道路信息, 还要给出车辆偏离道路中心的信息。基于偏移距离的方法： 车体中心与道路中心的准确偏移距离基于偏移角度的方法： 车辆行进的方向偏离车道线方向4.道路识别与跟踪 道路识别与跟踪系统建立在道路模型、运动学模型和动力学模型的基础上, 系统不仅要给出道路参数, 还要给出车辆相对于道路的位置信息和运动信息。道路识别与跟踪常用的方法：卡尔曼滤波、粒子滤波二二.非结构化道路图像理解非结构化道路图像理解结构化：高速公路、城市道路非结构化：越野环境、乡村道路非结构化环境理解更具挑战性：1.道路形状不规则2.没有明确的边缘3.光照、景
4、物、天气复杂多变 形状的不规则，边缘的模糊，决定了非结构化环境理解只能采用-基于特征的区域检测方法非结构化环境地形分类基于颜色特征的地形分类基于纹理特征的地形分类颜色纹理特征融合主动学习1.基于颜色特征的地形分类基于颜色特征的地形分类Manduchi提出一种方法，采用大量且多样化的特征数据来训练，以消除光照所产生的影响。使用高斯混合模型进行分类。该算法可以消除光照阴影的影响但是对50米以外的场景，会有错误的分类Buluswar等人提出使用多变量决策树来学习不同的地形所占据的RGB颜色空间区域。随后，Manduchi又提出了一种仅用一个典型光源下的地形图像来训练模型的方法。使用典型光源下的每一类
5、颜色统计的知识来预测在新场景下的光照类型。已有人证明，错误分类不能仅仅依靠颜色特征而被去掉。2.基于纹理特征的地形分类基于纹理特征的地形分类Castano提出了一种基于纹理特征的地形分类方法，使用基于多尺度-多方向的Gabor滤波器组提取的特征基于Garbor纹理特征的分类效果一般，但是涉及到大量的滤波，对于计算具有较高的要求。a.原图b.手动标记c.混合高斯模型d.直方图模型另外，还有其它的基于纹理特征的道路图像理解算法：基于小波变换基于离散余弦变换(DCT)基于灰度共生矩阵3.颜色纹理特征融合颜色纹理特征融合由于使用单一的特征对地形分类无法取得令人满意的结果。Shi等人提出颜色特征与纹理特
6、征结合的方法。基于高斯混合模型的非结构复杂环境地形分类3.1 特征提取颜色特征：采用YIQ颜色空间 计算每个特征窗口的颜色平均值及协方差，得到9维颜色特征向量每幅图像分割成无重叠的16*16 大小的子图像，称为特征窗口纹理特征： 对特征窗口先进行离散余弦变换。 在每个区域内按下式计算能量值，选择N=4可得到 13维的特征向量，对于一个2N*2N的特征窗口将颜色特征与纹理特征合并，可得到22维的颜色纹理特征。GMM：类条件似然密度模型的参数是由高斯分布的均值向量和协方差矩阵决定的。一般采用迭代方法，建立训练数据的最大似然方程，然后采用EM算法对类参数进行评估一种分类策略一种分类策略选定任一特征窗
7、口，与周围邻域的8个特征窗口可以形成一个33的小矩形。设每个小窗口属于最大类条件似然概率这一类。通过GMM求出每个特征窗口属于某一地形类别的最大类条件概率密度。对于9个特征窗口，选择属于类别k (k=1,2,.T)的个数Jk及类条件似然概率Pj，j=1,2, Jk。其中J1 + J2 + Jk =9。然后计算属于各个类别k的平均类条件概率如果那么，当前中心窗口就归为k类。除了GMM+颜色纹理特征算法，还有SVM+颜色纹理特征等方法，也能得到较为满意的结果。4. 面向可通行区域分类的主动学习算法面向可通行区域分类的主动学习算法有监督学习的方法，需要大量有标记的样本作为训练样本。然而在实际情况中，
8、对大量样本进行人工标记是极其繁琐和费时的。主动学习正是为有大量未标记样本服务的，它能自动决定哪些样本需要标记，以用较少的标记样本达到良好的学习效果。Dima首先将主动学习用于可通行区域分类中，筛选最有“兴趣”的1020幅图像交由专家标记。Tong提出交互式SVM主动学习算法，即SVMactive。初始化初始化L用用L训练训练SVM分类器分类器用用SVM去分类去分类U是否符合要求是否符合要求结束结束是是选择距离超平面最近的样本交选择距离超平面最近的样本交由专家标记由专家标记否否L是空集，U包含所有未标记样本SVMactive的原理图KSVMactive:为了解决样本数不平衡问题，采用SVM超平面
9、位置校正算法，根据上次迭代中专家标记与当前SVM分类结果的差值，调整本次迭代过程中超平面的位置。在超平面附近，聚集大量相似程度很高的样本，SVMactive的方法是：按距离超平面最近的样本交由专家标记的方法，效率较低。KSVMactive采用非监督的K均值聚类选取最有代表性的样本。聚类中选择的样本需要满足三个条件：1.样本与SVM超平面距离要近2.样本间的相似程度要高3.与已标记样本的相似性程序要低具有最小得分值的样本被认为最有代表性的样本，选出交由专家标记。KSVMactive的原理图L是空集，U包含所有未标记样本用用SVM去分类去分类U超平面位置校正超平面位置校正重新分类重新分类U是否符合要是否符合要求求结束结束是是聚类选出最有代表性的样聚类选出最有代表性的样本交由专家标记本交由专家标记否否初始化初始化L用用L训练训练SVM分类器分类器使用三种不同方法的平均分类正确率三三.总结与展望总结与展望目前基于单目视觉的道路图像在移动机器人、自动导引车、辅助驾驶、智能交通系统等领域得到了广泛的应用, 但仍有很多的问题需要解决, 今后的研究可以在以下3个方面深入。进一步提高系统的实时性、可靠性、鲁棒性从适合结构化道路转向适合各种自然道路多传感器信息融合 谢谢
