摄像机__标定

《摄像机__标定》由会员分享，可在线阅读，更多相关《摄像机__标定（81页珍藏版）》请在金锄头文库上搜索。

1、1、引言：什么是摄像机标定2、摄像机标定方法的分类3、传统摄像机标定方法,摄像机标定,摄像机标定的目的：三维重建,三维重建：摄像机标定的主要目的，也是计算机视觉的最主要的研究方向. (Marr 1982)，所谓三维重建就是指从图象出发恢复出空间点三维坐标的过程。摄像机标定：建立摄像机图像像素位置与场景点位置之间的关系，其途径是根据摄像机模型，由已知特征点的图像坐标求解摄像机的模型参数。三维重建的三个关键步骤摄像机标定：单个像机图象对应点的确定：双目二图象间摄像机运动参数的确定：单个像机运动,1、引言,1、世界坐标系： 2、摄像机坐标系：3、图像坐标系:,坐标系,在 中的坐标为 象素在轴上的物理

2、尺寸为,Affine Transformation :,图像数字化,U,C,V,齐次坐标形式:,其中,摄像机的内参数矩阵 K,传统摄像机标定方法基于交比不变的摄像机畸变系数标定,2、摄相机标定方法分类,1）传统的摄像机标定方法,特点利用已知的景物结构信息。常用到标定块。,1）传统的摄像机标定方法,优点 可以使用于任意的摄像机模型，标定精度高不足 标定过程复杂，需要高精度的已知结构信息。 在实际应用中很多情况下无法使用标定块。,2）基于交比不变的摄像机畸变系数标定,特点：将畸变参数单独进行标定优点：算法简单，与其它内外部参数分离缺点：误差受样本点的影响,3、摄像机传统标定方法,3.1、DLT方法

3、3.2、RAC方法3.3、张正友的平面标定方法(ICCV, 1999),Abdal-Aziz和Karara于70年代初提出了直接线性变换像机定标的方法，他们从摄影测量学的角度深入的研究了像机图像和环境物体之间的关系，建立了像机成像几何的线性模型，这种线性模型参数的估计完全可以由线性方程的求解来实现。,3.1、直接线性变换（DLT变换）,直接线性变换是将像点和物点的成像几何关系在齐次坐标下写成透视投影矩阵的形式：,DLT变换,其中 为图像坐标系下的点的齐次坐标， 为世界坐标系下的空间点的欧氏坐标， 为 的透视投影矩阵， 为未知尺度因子。,DLT变换,消去 ，可以得到方程组:,当已知 个空间点和对

4、应的图像上的点时，可以得到一个含有2* 个方程的方程组：,DLT变换,其中 为 的矩阵， 为透视投影矩阵元素组成的向量 。,DLT变换,像机定标的任务就是寻找合适的 ，使得 为最小，即,给出约束：,为 的前11个元素组成的向量， 为 前11列组成的矩阵， 为 第12列组成的向量。,向量的比例有意义,摄像机内外参数求解,是正交单位矩阵的第三行，行列式为1,摄像机内外参数求解,DLT变换,是否合理？,约束 不具有旋转和平移的不变性,解将随着世界坐标系的选取不同而变化.,证明：世界坐标系作刚性坐标变换,则,显然在一般的情况下,另一个约束 具有旋转和平移的不变性,DLT变换,由,向量 , , 是两两垂

5、直的单位向量,3.2、R. Tsai 的 RAC的定标算法,80年代中期Tsai提出的基于RAC的定标方法是计算机视觉像机定标方面的一项重要工作，该方法的核心是利用径向一致约束来求解除 （像机光轴方向的平移）外的其它像机外参数，然后再求解像机的其它参数。基于RAC方法的最大好处是它所使用的大部分方程是线性方程，从而降低了参数求解的复杂性，因此其定标过程快捷，准确。,像机模型 径向一致约束 定标算法,理想图像坐标到数字图像坐标的变换（只考虑径向偏差）,像机模型,(ud, vd)为一个点的数字化实际坐标，（u, v）为理想的数字化坐标，（u0, v0）为畸变中心,（u0, v0）,(ud, vd)

6、,（u, v）,径向一致约束,在图像平面上，点 ， 共线，与直线 平行或斜率相等.,理想透视投影成像坐标,真实透视投影成像坐标,摄像机中坐标,世界坐标系和摄像机坐标系的关系,像机模型,u,v,由径向约束,移项得：,同除以 得：,写成矢量形式得：,定标算法,定标算法步骤一,1.求解像机外参数旋转矩阵 和 、 方向上的平移和,（1）,（2）,（3）,（4）,（5）,确定 的符号并得到,假定 为正，在标定点中任意选取一个点，进行如下计算,若,计算,定标算法步骤二,2. 求解Tz, f, k,（1）,（2）,3.3、基于交比不变的摄像机畸变系数标定,对于空间中同一直线上的四个点：,交比：,空间点透视关

7、系：,对于空间四个点对应的理想图像点为：,对于空间四个点对应的实际图像点为：,张正友方法,3.4、张正友的平面标定方法,张正友方法,基本原理：,在这里假定模板平面在世界坐标系 的平面上 其中， 为摄像机的内参数矩阵， 为模板平面上点的齐次坐标， 为模板平面上点投影到图象平面上对应点的齐次坐标， 和 分别是摄像机坐标系相对于世界坐标系的旋转矩阵和平移向量,H,根据旋转矩阵的性质，即 和 ，每幅图象可以获得以下两个对内参数矩阵的基本约束,由于摄像机有5个未知内参数，所以当所摄取得的图象数目大于等于3时，就可以线性唯一求解出,张正友方法,张正友方法所用的平面模板,张正友方法,算法描述,张正友方法,打

8、印一张模板并贴在一个平面上从不同角度拍摄若干张模板图象检测出图象中的特征点求出摄像机的内参数和外参数求出畸变系数优化求精,张正友方法,张正友的平面标定方法是介于传统标定方法和自标定方法之间的一种方法。它既避免了传统方法设备要求高，操作繁琐等缺点，又较自标定方法精度高，符合办公、家庭使用的桌面视觉系统(DVS)的标定要求。张的方法是需要确定模板上点阵的物理坐标以及图像和模板之间的点的匹配，这给不熟悉计算机视觉的使用者带来了不便。,孟胡方法,3.5、孟晓桥、胡占义的圆标定方法,孟胡方法,从至少三个不同方位拍摄模板图象，根据射影不变性计算出每幅图象上的圆环点像的坐标，得到关于内参数矩阵的至少六个方程

9、，即可解出所有内参数。,孟胡方法,计算圆环点像的原理：,圆环点为无穷远点，它是绝对二次曲线上的一对共轭点,(1,i,0,0) (1,-i,0,0) 是一对圆环点,孟胡方法,在图像上，两个圆环点的图像 被计算出，则有：,孟胡方法,孟胡的方法与张的方法相比： 过程相似； 所用的模版不同，孟胡的方法基于曲线拟合（稳定），并且不需要任何匹配，而张的方法基于点，需要匹配模版的点和图像点。,吴等的标定方法,平行圆：同一个平面上的圆、或平行平面上的圆。原理：利用摄像机成像的准仿射不变性，计算图像上二此曲线的交点，得到圆环点的图像,进而：,3.6、吴等的平行圆标定方法,该方法从平行圆的最小个数出发，基于准仿射

10、不变性，分析了所有可能情况的计算圆环点的方法,吴等的标定方法,共面分布：,吴等的标定方法,以上可进行推广到非共面的平行圆的情形,吴等的标定方法,利用K重建一个垂直角；重建平行线之间的交角,吴等的标定方法,该方法和以往的基于圆的标定方法相比:(1). 从最小个数出发;(2). 计算圆环点图像简单;(3).只需要从拟合的二次曲线出发, 不需要任何匹配, 不需要计算圆心;(4). 应用场合广泛, 不仅仅限于平面的情形. 可应用基于转盘的重构。,H. Wu, Q. Chen, T. Wada, Visual Line Estimation from a Single Image of Two Eyes

11、. ICPR (3) 2004.,应用于:,G. Jiang, L. Quan, H.T. Tsui, Circular motion geometry by minimal 2 points in 4 images, ICCV2003.,自动化所一角,(1)视线定位,(2)基于转盘的重建,(3) 车辆机器人等的定位,胡占义等的主动视觉标定方法,基于平面单应矩阵的正交运动方法基于外极点的正交运动方法,4、主动视觉标定方法,胡主动视觉标定方法,基于平面单应矩阵的正交运动方法原理 是摄像机一组正交的平移运动，两个单应矩阵： 满足：,胡主动视觉标定方法,基于平面单应矩阵的正交运动方法原理即： ，其中

12、 五组两正交运动可完全求解5个内参数。,胡主动视觉标定方法,第1、2幅图像在第0幅图像的外极点分别是： 则：,基于外极点的正交运动方法原理,0,1,2,胡主动视觉标定方法,基于外极点的正交运动方法原理 从而： 五组两正交运动可完全求解5个内参数。,胡主动视觉标定方法,这两种主动视觉标定方法与最经典的主动视觉标定方法（马颂德的三正交运动法）相比，具有如下优点： 照相机的二正交运动比三正交运动更容易实现。 可以求解摄像机的所有5个内参数，马颂德的 方法可以求解4个内参数。,5.1、预备知识： 什么是摄像机自标定 ？ 为什么要对摄像机进行自标定 ？ 对极几何 5.2、基于Kruppa方程的自标定方法

13、 5.3、基于绝对二次曲面、无穷远平面的自标定方法 5.4、几种自标定方程的关系,5、摄像机自标定方法,摄像机自标定是指不需要标定块，仅仅通过图象点之间的对应关系对摄像机进行标定的过程。,什么是自标定？,为什么要进行自标定？,实际应用的需求，主要应用场所的转移,优缺点：,优点：灵活，方便缺点：精度不太高，鲁棒性不足,5.1、预备知识,自标定的基本假设及任务,1、假定图象点之间的对应关系已经确定。2、一般来说，认为在拍摄不同图象时，摄像机的内参数没有发生变化,3、所谓的自标定，就是要标定摄像机的内参数矩阵K,一些预备知识,1、点的齐次坐标二个齐次坐标如相差一个非零因子，则这二个齐次坐标相同,2、

14、无穷远直线上的点如点 为无穷远直线上的点，则 t =0,一些预备知识,3、通过二点的直线 如果 为二图象点，则通过该二点的直线的参数向量为：,L,x1,x2,一些预备知识,反对称矩阵（Anti-symmetric or Skew-Symmetric matrix),给定向量 ，其对应的反对称矩阵定义为：,则对应任意的向量 b, 有,一些预备知识,对偶原理,如果 C为一非退化的图象二次曲线，即：,则,过x 处的切线参数向量为：,则 , 代入上式可得：,对偶线坐标曲线,点坐标曲线,一些预备知识,对偶曲线示意图,C,点坐标曲线,对偶线坐标曲线,x1,x2,x3,一些预备知识,欧几理得空间下的投影矩阵,