张正友相机标定法讲解.ppt

张正友相机标定方法,曲峰,2021/1/27,相机畸变,镜头畸变实际上是光学透镜固有的透视失真的总称 枕形畸变又称鞍形畸变，视野中边缘区域的放大率远大于光轴中心附近区域放大率。常出现在远摄镜头中。 桶形畸变同枕形相反，视野中光轴中心附近区域放大率远大于边缘区域。常出现于广角镜头和鱼眼镜头。 线性畸变光轴同所拍摄的如建筑物类物体的垂平面不正交，则本应相互平行的远端一侧同近端一侧，以不相同的角度汇聚产生畸变。这种畸变本质上是一种透视变换，即在某一特定角度，任何镜头都会产生相似的畸变,枕形畸变,桶形畸变,线性畸变,针孔模型和透视投影,针孔模型1/f1/u1/v 透视投影中心投影法将形体投射到投影面上,坐标系,世界坐标系（Xw Yw Zw） 用户定义的空间三维坐标系，用来描述三维空间中的物体和相机之间的坐标位置，满足右手法则 摄像机坐标系（Xc Yc Zc） 以相机的光心作为原点，Zc轴与光轴重合，并垂直于成像平面，且取摄影方向为正方向，Xc、Yc轴与图像物理坐标系的x,y轴平行，且OcO为摄像机的焦距f 图像坐标系 是以图像的左上方为原点，的图像坐标系（u v）（此坐标以像素为单位），这里我们建立了图像物理坐标系（x y）为xoy坐标系（此坐标系以毫米为单位,一个二维点坐标被表示为 ，一个三维点被表示为 ，我们使用 去表示通过在矩阵最后面的元素加一个1的向量 和，相机通常都是针孔模型它的3D点M和它的图像投影点m的关系为,二维坐标,任意数,内参矩阵,旋转矩阵,平移矩阵,三维坐标,坐标变换,首先从二维坐标变换进行理解,矩阵表示,齐次坐标,坐标变换,引申到三维空间，第一个阶段我们依旧从旋转和平移两个步骤来推算从世界坐标系到相机坐标系的坐标变换,坐标变换,引申到三维空间，第一个阶段我们依旧从旋转和平移两个步骤来推算从世界坐标系到相机坐标系的坐标变换,在 中的坐标为 象素在轴上的物理尺寸为,Affine Transation,图像数字化,齐次坐标形式,其中,坐标变换,第二个阶段，空间点向像点转化,第三个阶段，像点向像素坐标转化,展开,Z0平面,我们假定,则原式可化为,这里，矩阵H就是从世界坐标系到图像坐标系的33大小的单应性矩阵。 对H再次进行变形，假设h1,h2,h3是H的列向量，有,单应性矩阵推导,对单应性矩阵H的估算,H就是我们常说的单应性矩阵，在这里描述的是空间中平面三维点和相机平面二维点之间的关系。因为相机平面中点的坐标可以通过图像处理的方式（哈里斯角点，再基于梯度搜索的方式精确控制点位置）获取，而空间平面中三维点可以通过事先做好的棋盘获取。所以也就是说每张图片都可以计算出一个H矩阵,假设,令,很显然，B是一个对称矩阵，我们假定,闭合形解,设H矩阵中第i列的向量为,带入到,中有,解得,V矩阵是2*6矩阵，也就是说每张照片可建立起两个方程组，6个未知数。根据线性代数知识可知，解6个未知数需至少6个方程组，所以也就是说我们至少需要三张照片才能求解未知数。b矩阵的解出，相机内参矩阵A也就求解出，从而每张图像的R，t也迎刃而解,最大似然估计,以上求解旋转矩阵R的方法是基于最小距离的，不具备物理意义。接下对上面得到结果用最大似然估计来进行优化。 转动标定模板，从不同的角度拍摄棋盘标定模板的n幅图像，设每幅图像都具有相同的标定点，标定点的个数为m，并假设每个标定点的坐标都有独立同分布的噪声，因为初始的参数已经求解，所以我们将每张图像的控制点根据求解的参数重投影回三维空间，最小化与真实值的差异，其实就是建立非线性最小化模型,其中mij是三维场景中第j个物点在第i幅图像上的像点坐标矢量，Ri是第i幅图像的旋转矩阵，是ti第i幅图像的平移向量，Mj是三维场景中第j个物点的空间坐标，是通过已知初始值得到的像点估计坐标。 的求解是一个经典的非线性优化的问题，使评价函数最小的A，Ri，ti就是这个问题的最优解。可以取第一次得到的线性求解结果作为A、 的初始值，解决这类问题的方法很多 ，在计算机视觉领域里通常使用Levenberg-Marquarat算法进行求解,畸变校正模型,由于透镜的中心对称性，所以式中考虑x方向上与y方向上的径向畸变率是相同的,然后，通过线性最小二乘的方法求出径向畸变系数,张正友标定方法流程,1.打印一张标定板，然后附加到一个平坦的表面上。 2.通过移动相机或者平面拍摄标定板各种角度的图片。 3.检测图片中的特征点 4.计算5个内部参数和所有的外部参数 5.通过最小二乘法先行求解径向畸变系数。 6.通过求最小参数值，优化所有的参数,谢谢观看