测绘人招聘、求职,首选“必高测绘人才网”

【干货】多视几何理论辅助的无人机低空摄影测量空三加密工业相机拍摄冷热轧钢板 图像测宽仪计算宽度(图1)

摘要:

        为降低无人机飞行姿态较差对后续空三数据处理的影响,将计算机视觉多视几何理论引入传统摄影测量,将其三维数据处理结果作为摄影测量空三加密的初始数据,以提高空三加密的精度和可靠性,不同地面分辨率和不同地形特征的多个测区试验证明了所提方法的正确性,为实际应用提供了理论和实践参考。

关键词:多视几何;无人机;摄影测量;空三加密【干货】多视几何理论辅助的无人机低空摄影测量空三加密工业相机拍摄冷热轧钢板 图像测宽仪计算宽度(图2)

  解析空中三角测量(又称摄影测量加密)是摄影测量内业测图和数字产品生成的第一道工序,其核心内容是以像片上的像点坐标为依据,用摄影测量的方法求解测区中所有影像的外方位元素,并基于摄影过程的几何反转,重建可量测的几何立体模型ꎬ然后解求出地面点的空间坐标[1]。 由于无人机有作业费用低廉、作业方便及受气候条件限制少等优点,已广泛应用于摄影测量、土地用途调查等诸多领域, 但是,无人机由于重量较轻,体积小,非常容易受气流干扰,飞行稳定性较差,航线保持较困难[2], 所拍摄的航摄影像相对于常规航空摄影像片旋偏角大、航线弯曲度大、影像重叠度不规则等,从而导致无人机机载POS 系统定位定姿偏差较大[3] 。尤其在用于精度要求较高的大比例尺航空摄影测量领域时,其后续摄影测量空三加密成果的精度将会受到不同程度的影响[4] ,是失败。

图像测宽仪利用工业相机拍摄清晰,可计算出钢板的宽度尺寸,同时其软件系统能清晰显示当前图像,非常方便。

  20 世纪80 年代后期兴起的GPS 辅助空中三角测量技术[5] 可大量减少甚至完全不使用地面控制点来进行摄影测量加密,以获取航测成图所需的图根控制点, 尽管基于差分GPS 定位(DGPS)[6] 的空中三角测量技术在常规航空摄影测量中已被广泛应用ꎬ在我国的传统航测4D 产品生产和西部测图困难区域的地形测绘中发挥了重要作用,但对于低空摄影测量数据的处理尚处于实验阶段,且DGPS 系统的引入增加了系统成本、野外基站的布设及测量方面的工作,另一方面,GPS 接收机在无人机高速飞行条件下容易发生信号失锁或周跳,定位结果易受影响[7] 。

  源于计算机视觉领域的多视几何(multiple-viewgeometry)[8] 与传统摄影测量在很多方面有极大的相似性, 多视几何由于对初始条件要求很低,因此对硬件条件及数据获取条件要求也很低。 然而,多视几何理论与传统摄影测量理论并不完全一致,两者仍存在一定的差异,如何将多视几何理论引入传统摄影测量加密,使多视几何理论弥补传统摄影测量理论的不足与局限性,无疑具有重要的实践意义。

工业相机拍摄的冷轧状态下线形激光照射钢带所形成的图像。图中的白色粗线为线形激光照射钢带所形成的亮带。图像处理时取这条亮带的端点为钢带宽度的边界,通过两个边界之间包含的像素数即可计算出钢板的宽度尺寸。

【干货】多视几何理论辅助的无人机低空摄影测量空三加密工业相机拍摄冷热轧钢板 图像测宽仪计算宽度(图3)

钢板宽度测量方式:

1多视几何理论辅助的空三加密

  1.1 二者的差异

根据钢板的轧制状态,有两种测量方式:

  在已标定相机的前提下,给出摄影测量和多视几何的技术流程,如图1 所示,

【干货】多视几何理论辅助的无人机低空摄影测量空三加密工业相机拍摄冷热轧钢板 图像测宽仪计算宽度(图4)

图1 多视几何与摄影测量空三加密技术流程

一种是对于冷轧的钢板(包括冷却后的热轧钢板)采用线形激光器和工业相机相结合进行宽度测量;

另一种是对于热轧的钢板,利用钢板发出的红外线直接用工业相机进行测量。

冷轧钢板的测量:

对于冷轧钢板或冷却后的热轧钢板的宽度测量,为了拍摄出清晰的测量基准线,在钢板上方设置一个线形激光器,激光器发出的激光与钢板宽度方向平行。这样,工业相机拍摄到的钢板图像上激光束照射的部位将会有一条清晰的亮线,根据这条亮线所占用的像素数即可得到钢板的宽度尺寸。

热轧钢板的测量:

对于热轧钢板的宽度测量,可以利用钢板自身发出的光和红外线辐射热进行测量。测量时只要把工业相机的宽度方向与钢板的宽度方向调整平行,然后在工业相机的图像上做出相应的基准线即可进行精确测量。与冷轧测量方式不同的是,该测量方式不用线形激光器,而且工业相机与钢板上面垂直布置进行测量。

  由图1 可以看出,多视几何与传统摄影测量的基本目的是一致的,即都是通过二维序列影像重建三维模型(相关技术细节详见文献[9],在此不再赘述), 但二者也存在一定的差异,从对最终测量成果精度的影响来看,主要包括:

  (1) 算法差异:由于摄影测量源于测绘学科,测量数据处理方法———最小二乘迭代求解几乎贯穿于摄影测量的全过程,而计算机视觉更强调矩阵分解,总是设法将非线性问题转化为线性问题,尽可能避免求解非线性方程。 因而,摄影测量较多视几何具有更高的定位精度。

不管是冷轧还是热轧,图像法钢板测宽仪都可以进行测量,另外还有光电发这种可对超宽板材测量的测宽仪,满足各种板材的测量需求。

推荐阅读


(点击标题可跳转阅读)

最详细、最完整的相机标定讲解深度学习+机器视觉=下一代检测视觉检测系统最经典的结构你了解吗?机器视觉技术的十大应用领域工业相机和普通相机究竟有什么不同?基于机器视觉和深度学习的智能缺陷检测波士顿等移动机器人的视觉算法解析2020年37个人工智能技术发展趋势机器视觉的光源选型及打光方案分析光学三维测量技术及应用国内80%搞机器视觉的工程师,走的路子是错的!视觉+机器人,如何实现连接器的自动装配?机器视觉技术发展的五大趋势搞懂机器视觉基本内容,这份PPT就够了

机器视觉:PC式视觉系统与嵌入式视觉系统区别  

基于HALCON的机器视觉开发,C++或C#如何选择? 

  (2) 初始数据:摄影测量利用最小二乘原理进行求解,因此所求未知数必须具有良好初始值, 这些初始值通常与飞机拍摄瞬间的姿态和方向有关,而无人机机载POS 定位定姿系统通常偏差较大,从而造成非线性最小二乘求解的困难。而多视几何理论并不要求未知数具备初始值,因为多视几何理论的已知数据仅需要影像上特征像点的像素坐标。

3D视觉技术在机器人抓取作业中的应用实例基于机器视觉的粗糙度检测方案机器视觉常用图像软件对比及分析工业相机编程流程及SDK接口使用汇总

声明:部分内容来源于网络,仅供读者学习、交流之目的。文章版权归原作者所有。如有不妥,请联系删除。

  (3) 像点坐标观测值精度:多视几何中的立体影像匹配技术成果颇丰,但大多强调匹配结果的稳健性,如新近发展的基于块匹配技术的多视立体(patch-based multi-view stereo)[10] ,这些匹配方法在精度上尚低于如摄影测量领域所常用的最小二乘匹配技术。


【干货】多视几何理论辅助的无人机低空摄影测量空三加密工业相机拍摄冷热轧钢板 图像测宽仪计算宽度(图5) End 【干货】多视几何理论辅助的无人机低空摄影测量空三加密工业相机拍摄冷热轧钢板 图像测宽仪计算宽度(图5)

【干货】多视几何理论辅助的无人机低空摄影测量空三加密工业相机拍摄冷热轧钢板 图像测宽仪计算宽度(图7)

  基于以上的分析可知,多视几何技术对影像拍摄位置和方向无需严格约束,具有很好的鲁棒性和稳健性,其优化结果恰好为摄影测量加密提供了良好的初始数据, 这也是二者可进行有效融合的理论和现实基础。

  1.2 多视几何理论辅助的空三加密

  传统摄影测量加密采用理论较为严密的光束法区域平差,其使用的函数模型为共线方程

【干货】多视几何理论辅助的无人机低空摄影测量空三加密工业相机拍摄冷热轧钢板 图像测宽仪计算宽度(图8)

【干货】多视几何理论辅助的无人机低空摄影测量空三加密工业相机拍摄冷热轧钢板 图像测宽仪计算宽度(图9)

【干货】多视几何理论辅助的无人机低空摄影测量空三加密工业相机拍摄冷热轧钢板 图像测宽仪计算宽度(图10)

  基于式(3)的结果可为式(2)提供待求参数初始值, 更进一步的,式(3) 的结果还可以再迭代优化。

  不失一般性,假设摄影测量区域网(计算机视觉一般称之为影像场景)中共有n 个三维空间点在m 张相片中可见并令xij为第i 个像点在第j 张影像上的像点坐标,设定一个二进制变量vij ,如果第i 个像点在第j 张影像上可见,则vij =1,否则vij =0,令aj表示相机参数,bj 表示一个三维空间点,则多视几何采用的光束法平差即是按下式最小化通过三维空间点和相机参数计算得到的像点的重投影误差

【干货】多视几何理论辅助的无人机低空摄影测量空三加密工业相机拍摄冷热轧钢板 图像测宽仪计算宽度(图11)

【干货】多视几何理论辅助的无人机低空摄影测量空三加密工业相机拍摄冷热轧钢板 图像测宽仪计算宽度(图12)

 用中选购攻略,可以基于式(3)或式(5)的结果为式(2)提供待求参数初始值。

2试 验

  2.1 试验数据及软件系统选择了不同地面分辨率及不同地形特征的3 块区域(简记为A、B、C)开展试验(详见表1), A 区域为平坦地形,地面高程约为45 m,共3 条航带30 张影像,覆盖面积约1.3km2,布设了24 个像控点,其中10 个为检查点,B 区域为丘陵地形,地面高程1300~1500 m,共8 条航带392 张影像,覆盖面积约10km2,布设了38 个像控点,其中11 个为检查点,C 区域为高山地地形,地面高程1300 ~ 2100 m,共14 条航带520 张影像,覆盖面积约16.5km2,布设了72 个像控点,其中18 个为检查点, 各区域航线布设及像控点分布如图2 所示,图中三角形为像控点,圆形为检查点,其余为航点, 3 个测区的无人机航摄参数见表1。

【干货】多视几何理论辅助的无人机低空摄影测量空三加密工业相机拍摄冷热轧钢板 图像测宽仪计算宽度(图13)

【干货】多视几何理论辅助的无人机低空摄影测量空三加密工业相机拍摄冷热轧钢板 图像测宽仪计算宽度(图14)

图2 各区域航线布设及像控点分布

  多视几何和摄影测量加密算法分别选用目前使用较为广泛的Agisoft PhotoScan[12] 和Inpho[13] 软件系统ꎮ PhotoScan 基于计算机视觉最新的多视图三维重建技术对序列立体影像进行全自动化的处理,也可以通过给予的控制点生成测量坐标系统下的真实坐标的三维模型[14] , Inpho 对于各种航空框幅式相机、数字框幅式CCD 相机、推扫式ADS40 相机甚至无人机承载的数码相机等获取的影像均可实现完全自动化的高效空三处理ꎬ其用于空三加密处理的模块为MATCH-AT,该模块采用光束法区域网平差模型进行平差解算,其自动化的最小二乘匹配技术精度较高[15] 。

  2.2 试验结果及分析

  试验及分析主要是基于像控点采用不同的摄影测量加密方案完成空三加密,继而在各试验场地中布设的像控点中选取t 个点,比较其GPS 测量坐标与立体模型中的人工测量坐标的较差Δi(i = X,Y,Z),并计算其中误差,即

【干货】多视几何理论辅助的无人机低空摄影测量空三加密工业相机拍摄冷热轧钢板 图像测宽仪计算宽度(图15)【干货】多视几何理论辅助的无人机低空摄影测量空三加密工业相机拍摄冷热轧钢板 图像测宽仪计算宽度(图16),来进行数据分析, 考虑到本文的主要研究目的,设计了如下空三加密试验方案。方案1:基于PhotoScan 的摄影测量加密(主要利用该软件系统中的基于式(3)—(5) 的稀疏光束法优化功能);方案2:基于Inpho 的摄影测量空三加密;方案3:多视几何辅助的摄影测量空三加密, 即将PhotoScan 的空三成果作为光束法平差的初始值,利用Inpho 软件基于式(2)进一步迭代优化。

【干货】多视几何理论辅助的无人机低空摄影测量空三加密工业相机拍摄冷热轧钢板 图像测宽仪计算宽度(图17)

  图3 和图4 分别给出了各区域采用方案1 和方案3 空三结果的图形显示,表2 给出了方案1 和方案3 空三外方位差值统计,表3 给出了各区域采用方案1 和方案2 和方案3 的检查点立体量测精度统计,图5 所示为试验区域A 检查点高程误差统计折线图(分析X、Y 坐标误差分布,具有类似规律,因篇幅所限,这里未全部绘出)。

【干货】多视几何理论辅助的无人机低空摄影测量空三加密工业相机拍摄冷热轧钢板 图像测宽仪计算宽度(图18)

图3 各区域方案1 的空三结果

  以上试验结果表明:

  (1) 方案1(基于PhotoScan 的摄影测量加密)得到的外方位元素与方案3(多视几何辅助的摄影测量空三加密)得到的外方位元素比较接近, 两种方案获得的线元素差值均小于1 m,角元素差值均小于0.1°,因此将方案1 得到的结果作为方案3 的初始值具有很高的精度。

【干货】多视几何理论辅助的无人机低空摄影测量空三加密工业相机拍摄冷热轧钢板 图像测宽仪计算宽度(图19)

  图4 各区域方案3 的空三结果

打赏

  • 打赏支付宝扫一扫
  • 打赏扫一扫