航拍图像序列自动拼接技术.doc

《航拍图像序列自动拼接技术.doc》由会员上传分享，免费在线阅读，更多相关内容在教育资源-天天文库。

1、1航拍图像序列自动拼接技术与地图重建航拍图像序列自动拼接是指将一组内容上相关的航拍图像自动拼接为一幅能够更为全面描述场景内容的全景图像的过程。鉴于视觉系统中存在的分辨率与视场范围之间的固有矛盾，为了保证较高的分辨率，单幅的航拍图像对应的场景区域通常较小，不利于准确、全面地观察和分析地面场景。而航拍图像自动拼接技术正是解决这一问题的有效途径。航拍图像拼接主要包括配准和镶嵌两个步骤，其中的核心是图像配准。人们已经提出了很多配准方法，如灰度相关法、相位相关法、基于特征的方法等。其中，基于特征的方法首先在两幅输入图像中分别提取具有不变性的特征点，然后通过搜索比较得到一组匹配

2、的特征点对，并利用这些特征对之间的对应关系估计出全局变换参数，最后借助估算出的变换模型将两幅图像校正到同一平面上，从而实现配准。相对于其他方法，基于特征的配准方法能够容忍更大的图像差异，有助于获取稳定的配准结果。基于特征的配准方法主要有三个步骤：提取特征点、搜索匹配点和计算转换矩阵。1.1坐标系统在图像采集过程中需要将客观世界的3D场景投影到摄像机的2D像平面上，这个投影可以用成像变换来描述。成像变换涉及到不同坐标系之间的变换，考虑到图像采集的最终结果是要得到计算机能够处理的数字图像，这里介绍一下对3D空间景物成像时所涉及到的坐标系统。(1)世界坐标系也称真实或现实

3、世界坐标系统XYZ，表示场景点在客观世界的绝对坐标(所以也称为客观世界坐标系统)。一般的3D空间场景都是用这个坐标系统来表示的。(2)摄像机坐标系以摄像机(观察者)为中心制定的坐标系统xyz，将场景点表示成以观察者为中心的数据形式，一般常取摄像机的光轴为Z轴。因为在场景中也许有多个摄像机，而每个摄像机都会有自己的坐标系。在许多情况下，图像平面坐标系是摄像机坐标系的一部分。根据透视投影公式可建立图像坐标系与摄像机坐标系之间的转换关系式：fxyzxyccc（3－5）用矩阵形式表示为：xcxf000yczy0f00czc1

4、00101（3－6）(3)像素坐标是用来表示图像阵列中图像像素位置的坐标，它也称图像阵列坐标或网格坐标。因为摄像机采集到的图像以标准电视信号的形式输入计算机，经计算机中专用的数模转换板变换为数字图像，每幅数字图像在计算机内为MN的数组，M行N列的图像中每一个元素（称为像素，pixel）的数值即是图像点的亮度（或灰度）。对于图像中每一个像i,jj素的坐标值，i表示该像素在图像中的列数，表示该像素在图像中的行数，此时i和j都是正整数。这种表示方法特别方便计算机程序对图像进行处理，因为它和计算机程序中的数据结构二维数组对应，写起程序来相当方便。为

5、了提高处理图像的精度，还可以引入子像素（subpixel）的概念。所谓子像素是指像素与像素之间的点，其坐标用小数表示。（4）图像平面坐标是用来表示场景点在图像平面上的投影的坐标系。由于在像素坐标(u,v)系中每一个像素的坐标分别是该像素在数组中的行数与列数，并没有用物理单位表示出该像素在图像中的位置，因而需要再建立以物理单位（例如cm）表示的图像坐标系。该O1yu,v(x,y)坐标系以图像内某一点为原点，x轴与轴分别与轴平行，如下图所示，其中表示以毫米为单位的图像坐标系的坐标。图1像素坐标系与图像平面坐标系的关系其中，世界坐标系与摄像机坐标系之间是刚体转换关系。设空

6、间中某一点P在世界坐TT(x,y,z)(x,y,z)标系和摄像机坐标系下的坐标分别是www与ccc，其转换关系式如下：xcxwxwycRtywywMT1zO1zzcww111（3－7）TO(0,0,0)M1其中，R为33旋转矩阵；t为三维平移向量；；为44矩阵。合并式（3－4）、（3－6）和（3－7）得：10udx0xwuf0001Rtywzv0v0f00c0TdyO1zw10010

7、0011xwx0u00Rtyw0v0MMXMXy0T12wwO1zw00011（3－8）其中，xfdx，yfdy；XTw=(xw，yw，zw，1)；M为34矩阵，称为投影矩f,dx,dy,u,v阵；M1完全由00决定，它们只与摄像机内部结构有关，是摄像机内部参数；M2完全由摄像机相对于世界坐标系的方位决定，是摄像机的外部参数。摄像机标定就是要得到内外参数，从而确定投影矩阵M。1.2成像模型一般的成像系统通常将三维场景变换为二维灰度或彩色图像，这种变换可以用一个从三维