A Stereo Selecting Method of Multi-view Matching Models Guided Based on Feature Points
-
摘要: 从冗余数据中选择一个或者多个最为显著的立体像对,在最少“伪信息”的影响下,获取最佳影像匹配效果,降低其它质量较差影像的负面平均效应,是提高多视影像匹配性能的关键。基于准确匹配的特征点,通过匹配测度的鲁棒性分析,提出一种多视影像的匹配质量分析方法;在此基础上,提出了一种基于特征点引导的多视影像择优匹配方法及基本思想、计算基础和择优匹配步骤。利用ADS40多度重叠影像数据进行了择优匹配实验。结果表明,该方法能够有效选取匹配质量较优的影像,获取更加准确的多视匹配结果,在一定程度上,比传统的多视匹配方法更加有效。Abstract: Selecting one or more robust matching stereo pairs from redundant overlapping images to reduce the negative influence of incorrect or confusing image information to obtain the most desirable matching results improves multi-view matching ability and quality in multi-view matching techniques. In this paper, a matching quality analysis method for multi-view images is proposed that measures matching robustness based on correctly matched SIFT feature points. Furthermore, based on the method, a feature point guided multi-view image stereo selection matching method is detailed including the basic principles, algorithm, and matching process. Experiments were done on ADS40 multi-view imagery. The results show that the proposed method automatically and efficiently selects images of high matching quality from redundant overlapping images to obtain more correct multi-view matching results. This method is, to some extent, more effective than traditional multi-view matching methods.
-
Keywords:
- feature point /
- multi-view image /
- matching quality /
- matching measure /
- stereo selecting matching
-
雾霾是空气污染和气象因素共同作用的结果。大气中的微颗粒物(PM2.5/PM10)是导致能见度降低的主要因素[1],城市大气PM2.5/PM10污染影响空气质量,威胁人群健康,是具有区域性特征、危害严重的大气污染物。Fang[2]以美国东北部为例研究了夏季PM2.5空气质量的物理气候模型; Boynard[3]利用红外大气探测干涉仪 (Infrared Atomospheric Sounding Interferometer,IASI)卫星测量技术探测了中国华北地区的冬季空气污染。近年来,我国部分学者针对北京、广州、深圳和天津等城市开展了城市PM2.5浓度特征及其影响因素的分析研究[4-9]。
水汽(可降水量)是影响天气变化的关键要素,也是雾霾天气形成的外在影响因素之一,国内众多学者开展了GPS水汽的应用研究[10, 11]。研究发现,GPS可降水量在雾霾过程前后有较大的变化[12]。据此可以推测,水汽的变化可能会影响大气中PM2.5/PM10的质量浓度变化。本文利用2013年北京市天坛站的PM2.5/PM10观测资料,结合GPS水汽资料、无线电探空水汽资料,进行北京地表PM2.5/PM10变化与大气水汽变化的相关性研究,并对相关性结果进行分析。
1 实验数据与方法
本文研究数据主要包含GPS水汽(precipitable water vapor,PWV),无线电探空水汽(整层水汽和分层水汽)以及PM2.5/PM10浓度观测数据3类数据。
1) GPS水汽
国际GNSS服务(Internatianal GNSS Service,IGS)提供国际GPS站点的对流层延迟解算资料和气象观测数据,通过下载BJNM站点的对流层延迟和气象资料,依据GPS气象学原理可计算获得时值GPS水汽序列,单位为mm。但由于IGS提供的GPS对流层延迟数据和气象数据不完整,导致解算的GPS水汽序列不连续,有个别天数数据缺失。
2) 无线电探空水汽
无线电探空是气象领域探测水汽的一种常用手段,利用该方法可探测各层气压、高度、温度、风速和风向等要素,利用各分界层的气压和温度观测数据可反演各层的水汽和整层水汽。无线电探空在每天的8:00和20:00(北京时间)进行观测。本文收集了北京市2013年无线电探空观测资料,按照李国平[13]提供的无线电探空水汽计算方法,获得无线电探空整层水汽和分层水汽,单位为mm。
3) PM2.5/PM10浓度
北京有多个PM2.5/PM10浓度观测站点,本文选择与BJNM站点最为接近的天坛站点,该站点资料为时值观测数据。北京天坛站2013年的PM2.5/PM10观测资料缺失9月和10月上旬数据,其他时间也有个别天数不连续。PM2.5/PM10观测数据的单位为μg/m3。
BJNM站点GPS PWV与天坛站PM2.5/PM10观测资料均为时值观测数据,因此本文的相关性分析均是时值数据比较;无线电探空观测站点每天观测两个时次,无线电探空水汽用于分析分层水汽与PM2.5/PM10观测的相关性,两者相关性的计算对应每日8时和20时的两个频次。
2 GPS PWV变化与PM2.5/PM10变化的比较
由于北京处在大陆干冷气团向东南移动的通道上,每年从10月到次年5月受来自西伯利亚的干冷气团控制,6~9月前后受到海洋暖湿气团的影响。降水主要集中在夏季,7、8月尤为集中。由于夏季与其他季节气候状态明显不同,因此本文将GPS PWV与PM2.5/PM10的比较分为夏季和秋、冬、春季节两个时段进行。
2.1 夏季GPS PWV与PM2.5/PM10的比较
6~8月为北京的夏季,降水对大气中的雾霾起到了清除和冲刷作用。对于夏季水汽与PM2.5/PM10的相关性,将选择无降水过程时段进行比较。根据天气网(http://lishi.tianqi.com)提供的北京历史天气查询,2013年6~8月北京发生的降水日数分别为15天、16天和11天,选择该时段持续时间3日或以上的时间段进行PM2.5/PM10变化和GPS PWV变化的比较(图 1为其中3个时段两者变化的比较),统计了夏季5个时段的GPS PWV与PM2.5/PM10的相关性(表 1)。
表 1 夏季GPS PWV与PM2.5/PM10的相关性Table 1. Correlation Between GPS PWV and PM2.5/PM10 in Summer时间 PM2.5 & GPS PWV PM10 & GPS PWV 161~165 0.228 0.298 168~173 0.057 -0.043 224~226 0.392 0.275 229~231 -0.054 -0.325 233~237 0.612 0.339 通过图 1中 GPS PWV与PM2.5/PM10的变化比较,结合表 1的相关性统计结果,可以看出,GPS PWV变化与PM2.5/PM10变化在夏季没有明显相关性。相比其他季节,夏季雾霾发生的频率低一些,这是因为夏季经常有强对流天气发生,降水对大气中的雾霾能起到清除和冲刷作用。降水过程有助于PM2.5/PM10的质量浓度下降。强对流天气创造了大气污染物扩散的有利条件,一般不易形成大范围的雾霾天气。
2.2 秋、冬、春季节GPS PWV与PM2.5/PM10的比较
图 2(a)~2(c)为秋、冬、春季节北京GPS PWV与PM2.5/PM10的比较,表 2对期间多个时段两者的相关性进行了统计分析。
表 2 秋、冬、春季节GPS PWV与PM2.5/PM10的相关性Table 2. Correlation Between GPS PWV and PM2.5/PM10 Among Autumn,Winter and Spring季节 年积日 PM2.5 & GPS PWV PM10 & GPS PWV 058~063 0.739 0.417 春节 069~072 0.663 0.619 122~125 0.501 0.536 295~297 0.512 - 300~305 0.739 0.794 秋季 307~310 0.646 0.639 311~313 0.890 0.796 326~331 0.601 0.604 339~343 0.711 0.799 冬季 022~026 0.663 0.560 046~048 0.642 0.614 052~054 0.639 0.811 由图 2和表 2可看出,在秋、冬、春季节,GPS PWV变化与PM2.5/PM10变化的相关系数大于0.5。水汽的上升对应了PM2.5/PM10质量浓度的上升,原因分析如下。
1) 水汽的增加能促进二氧化硫、氮氧化物被氧化成二次污染物颗粒,使PM2.5/PM10浓度提高;
2) 当水汽上升时,臭氧与有机物发生化学反应生成大量的微颗粒,而该微颗粒属于PM2.5/PM10;
3) 北京PM2.5/PM10污染源的组成中,煤燃烧所占比重最大,尤其是到了冬季,燃煤供暖,煤燃烧占的比重会更大。燃煤PM2.5/PM10微粒大多为难溶于水且吸湿性较差的球形硅铝质矿物颗粒,润湿性较差,因而PM2.5/PM10颗粒不因水汽的增加而减少。
3 秋、冬、春季节无线电探空水汽变化PM2.5/PM10变化的比较
由§2的研究可知,秋、冬、春季节GPS PWV(整层水汽含量)与PM2.5/PM10的变化的相关系数大于0.5。本节将开展无线电探空分层水汽变化与PM2.5/PM10变化的比较研究。
利用无线电探空仪探测的各分界层的气压和温度观测数据可用于反演各层的水汽和整层水汽值。各分界层以气压为标准进行划分(高度为平均值),共11层:第一层PWV(1),范围为地面~1000 hPa (约0~250 m);第二层PWV(2),范围为1000 ~925 hPa (约250~850 m);第三层PWV(3),范围为925 ~850 hPa(约850~1 500 m);第四层PWV(4),范围为850 ~700 hPa(约1 500~3 000 m);第五层PWV(5),范围为700 ~500 hPa(约3 000~5 500 m);第六层PWV(6),范围为500 ~400 hPa(约5 500~7 000 m);第七层PWV(7),范围为400~300 hPa (约7 000~9 000 m);第八层PWV(8),范围为300~250 hPa(约9 000~10 200 m);第九层PWV(9),范围为250~200 hPa (约10 200~11 500 m);第十层PWV(10),范围为200~150 hPa(约11 500~13 500 m);第十一层PWV(11),范围为150~100 hPa(约13 500~16 000 m)。
本文进行了北京市2013年的无线电探空整层水汽和分层水汽的计算,获得了全年的无线电探空水汽序列。按照季节绘制无线电探空分层水汽的垂直廓线图(图 3),并计算各季节分层水汽占整层水汽的比重(表 3)。
表 3 不同季节水汽的垂直廓线Table 3. Percent of per Layer PWV in Different Seasons无线电探空分层 春季 夏季 秋季 冬季 1 0.033 0.011 0.043 0.060 2 0.222 0.215 0.221 0.187 3 0.192 0.185 0.191 0.174 4 0.290 0.281 0.281 0.290 5 0.205 0.220 0.203 0.220 6 0.039 0.054 0.041 0.040 7 0.014 0.025 0.015 0.015 8 0.002 0.005 0.002 0.003 9 0.001 0.002 0.001 0.003 10 0.001 0.001 0.001 0.004 11 0.001 0.001 0.001 0.004 由图 3和表 3可知,无线电探空第2~5层的水汽占整层水汽的比重最大,由于篇幅的限制,图 4~6仅绘制了无线电探空整层水汽、第3层水汽和第4层水汽与PM2.5/PM10的比较结果。由于无线电探空第8~11层水汽占整层水汽的比重不到1%,因此在本研究中不予考虑。表 4对5个时间段的无线电探空水汽(整层水汽、分层水汽)与PM2.5/PM10的相关性进行了统计分析。
表 4 无线电探空整层/分层水汽与PM2.5/PM10的相关性统计Table 4. Corelation Between Radiosonde Total/per Layer PWV and PM2.5/PM10探空水汽 024~040 043~059 061~072 319~334 339~349 PM2.5 PM10 PM2.5 PM10 PM2.5 PM10 PM2.5 PM10 PM2.5 PM10 PWV 0.703 0 0.751 5 0.626 7 0.612 7 0.602 3 0.699 6 0.551 0 0.539 3 0.592 1 0.720 3 PWV(1) -0.199 3 -0.155 8 -0.285 4 -0.238 4 -0.528 7 -0.582 7 0.407 7 0.124 8 0.033 5 0.263 5 PWV(2) 0.534 4 0.468 2 0.413 8 0.402 3 0.638 5 0.693 3 0.357 8 0.356 2 0.356 0 0.461 9 PWV(3) 0.868 2 0.843 7 0.603 6 0.599 9 0.649 0 0.723 9 0.485 9 0.516 1 0.570 1 0.608 4 PWV(4) 0.773 7 0.829 9 0.700 0 0.683 6 0.534 1 0.614 9 0.582 7 0.585 4 0.576 8 0.721 9 PWV(5) 0.405 6 0.514 5 0.564 9 0.549 6 0.359 4 0.466 4 0.608 7 0.584 5 0.671 0 0.801 8 PWV(6) 0.030 5 0.031 3 0.302 2 0.259 5 0.287 0 0.394 9 0.585 1 0.561 7 0.622 4 0.672 6 PWV(7) -0.217 6 -0.233 9 0.006 8 -0.035 2 0.265 7 0.358 6 0.685 2 0.651 5 0.396 9 0.488 2 由图 4~6和表 4看出,在秋、冬、春季节,无线电探空总水汽变化与PM2.5/PM10变化的相关性大于0.5。分层水汽与PM2.5/PM10比较中,第3、4层水汽变化与PM2.5/PM10变化最为吻合,此两层水汽的上升或者下降,对应了PM2.5/PM10观测值的上升或者下降。
4 结 语
本文利用GPS PWV、无线电探空水汽与PM2.5/PM10观测资料,进行了北京地表PM2.5/PM10变化与大气水汽变化的相关性研究,研究表明,夏季GPS PWV变化与PM2.5/PM10变化没有明显的相关性规律;在秋、冬、春季节,GPS PWV变化与PM2.5/PM10变化的相关系数大于0.5;秋、冬、春季节无线电探空整层(分层)水汽与PM2.5/PM10变化的比较中,整层水汽变化与PM2.5/PM10变化的相关系数大于0.5,第3,4层水汽变化与PM2.5/PM10变化的相关性最佳。
本文研究结果表明,在秋、冬、春季节水汽变化与PM2.5/PM10变化的相关性超过0.5,因而可以将水汽资料用于雾霾高发季节的大气微颗粒污染浓度变化的监测。
-
图 8 待匹配点P0的GC3多视匹配模型像方搜索范围
(N1为基准影像,其它影像为搜索影像;“+”为初始匹配点;线段为像方搜索范围;“×”为同名匹配点)
Figure 8. Image Searching Space of Matching Point P0 by GC3 Multi-view Matching Model
(N1 was Reference Image, the others were Searching Images; "+"was Initial Matching Result; Lines Referred to Searching Space; "×"was successfully matched points for P0)
表 1 多视影像的匹配质量分析
Table 1 Matching Quality Analysis of Multi-view Images
匹配质量类型 匹配测度分析一 匹配测度分析二 质量标识 匹配质量 (1) ρi1>0.90 ρi1/ρi2>1.2 1 较优 ρi1>0.80 ρi1/ρi2>1.4 1 较优 ρi1>0.65 ρi1/ρi2>1.6 1 较优 (2) ρi1>0.90 ρi1/ρi2<1.2 0 一般 ρi1>0.80 ρi1/ρi2<1.4 0 一般 ρi1>0.65 ρi1/ρi2<1.6 0 一般 0.50<ρi1<0.65 ρi1/ρi2>1.4 0 一般 (3) 0.50<ρi1<0.65 ρi1/ρi2<1.4 -1 较差 ρi1<0.50 / -1 较差 注:沿匹配方向线的相关测度曲线ρi(ρi1最大相关系数,ρi2次局部最大相关系数,单位为1) 表 2 ADS40实验数据参数
Table 2 Parameters of ADS40 Experiment Image
数据 预处理级 焦距 地面采样间隔 相对航高 影像数量 数据航带 ADS40 L1级 62.5 mm 0.21 m 2 000 m 6张 2条 表 3 搜索影像的匹配质量分析与标识
Table 3 Matching Quality Analysis and Index of Searching Images
匹配测度及分析 N1-B1 N1-F1 N1-B2 N1-N2 N1-F2 特征点P1 ρ1 0.908 3 0.780 1 0.768 3 0.677 1 0.767 0 ρ2 0.714 2 0.738 7 0.441 2 0.530 6 0.576 9 ρ1/ρ2 1.271 8 1.056 0 1.741 3 1.276 1 1.329 5 质量标识 1 0 1 0 0 特征点P2 ρ1 0.957 2 0.888 7 0.943 5 0.872 5 0.969 2 ρ2 -0.243 2 0.569 1 0.150 0 0.371 9 0.446 7 ρ1/ρ2 3.935 9 1.561 6 6.290 0 2.346 1 2.169 7 质量标识 1 1 1 1 1 特征点P3 ρ1 0.762 8 0.655 7 0.398 9 0.297 7 0.329 3 ρ2 0.553 9 0.266 8 0.325 9 0.220 8 0.321 0 ρ1/ρ2 1.377 1 2.457 6 1.224 0 1.348 3 1.025 9 质量标识 0 1 -1 -1 -1 表 4 搜索影像的匹配质量标识累加结果
Table 4 Cumulative Matching Quality of Searching Images
N1-B1 N1-F1 N1-B2 N1-N2 N1-F2 质量标识累加 2 2 1 0 0 -
[1] 张永生, 范大昭, 纪松.用于ADS40传感器的多视觉立体匹配算法模型[J].测绘科学技术学报, 2007, 24(2):83-86 Zhang Yongsheng, Fan Dazhao, Ji Song. Multi-view Matching Algorithm Model for ADS40 Sensor[J].Journal of Zhengzhou Institute of Surveying and Mapping, 2007, 24(2):83-86
[2] 姚国标, 邓喀中, 杨化超等.基于几何约束的倾斜立体影像匹配[J].中国矿业大学学报, 2013, 42(4):676-682 http://industry.wanfangdata.com.cn/dl/Detail/Periodical?id=Periodical_zgkydxxb201304024 Yao Guoji, Deng Kazhong, Yang Huachao, et al. Matching Methods for Oblique Stereo Images on the Basis of Geometry Constraint[J]. Journal of China University of Mining & Technology, 2013, 42(4):676-682 http://industry.wanfangdata.com.cn/dl/Detail/Periodical?id=Periodical_zgkydxxb201304024
[3] 柯涛, 张祖勋, 张剑清.旋转多基线数字近景摄影测量[J].武汉大学学报·信息科学版, 2009, 34(1):44-47 http://ch.whu.edu.cn/CN/abstract/abstract1135.shtml Ke Tao, Zhang Zuxun, Zhang Jianqing. Panning and Multi-baseline Digital Close-range Photogrammetry[J].Geomatics and Information Science of Wuhan University, 2009, 34(1):44-47 http://ch.whu.edu.cn/CN/abstract/abstract1135.shtml
[4] 纪松. 多视匹配策略与优化方法研究[D]. 郑州: 信息工程大学, 2012 http://cdmd.cnki.com.cn/Article/CDMD-90005-1013161264.htm Ji Song. Study on The Strategy and Improvement Method of Multi-view Matching Technology[D]. Zhengzhou: Information Engineering University, 2012 http://cdmd.cnki.com.cn/Article/CDMD-90005-1013161264.htm
[5] 刘经南, 方媛, 郭迟等.位置大数据的分析处理研究进展[J].武汉大学学报·信息科学版, 2014, 39(4):379-385 http://ch.whu.edu.cn/CN/abstract/abstract2947.shtml Liu Jingnan, Fang Yuan, Guo Chi, et al. Reaserch Progress in Location Big Data Analysis and Processing[J].Geomatics and Information Science of Wuhan University, 2014, 39(4):379-385 http://ch.whu.edu.cn/CN/abstract/abstract2947.shtml
[6] Zhang B C. Towards a Higher Level of Automation in Softcopy Photogrammetry: NGATE and LiDAR Processing in SOCET SET®[C]. GeoCue Corporation 2nd Annual Technical Exchange Conference, Tennessee, USA, 2006
[7] Rumpler M, Irschara A, Bischof H. Multi-view Stereo: Redundancy Benefits for 3D Reconstruction[C]. Proceedings of the 35th Workshop of the Austrian Association for Pattern Recognition, Graz, Austria, 2011 http://www.researchgate.net/publication/228931092_Multi-View_Stereo_Redundancy_Benefits_for_3D_Reconstruction
[8] Alsadik B, Gerke M, Vosselman G. Optimal Camera Network Design for 3D modeling of Cultural Heritage Objects[J]. Journal of Cultural Heritage, 2012, 14(6):515-526 https://www.researchgate.net/profile/Bashar_Alsadik/publication/261158512_Automatic_image_network_design_leading_to_optimal_image-based_3D_models/links/0f31753359712cc446000000.pdf?inViewer=true&disableCoverPage=true&origin=publication_detail
[9] Ahmadabadian A H, Robson S, Boehm J, et al. Image Selection in Photogrammetric Multi-View Stereo Methods for Metric and Complete 3D Reconstruction[C]. Videometrics, Range Imaging and Applications Conference, Munich, Germany, 2013 doi: 10.1117/12.2020472
[10] Zhang L. Automatic Digital Surface Model (DSM) Generation from Linear Array Images[D]. Zurich: Swiss Federal Institute of Technology, 2005 http://www.researchgate.net/publication/36180044_Automatic_Digital_Surface_Model_DSM_Generation_from_Linear_Array_Images
[11] 张力, 张继贤.基于多基线影像匹配的高分辨率遥感影像DEM的自动生成[J].武汉大学学报·信息科学版, 2008, 33(9):943-946 http://ch.whu.edu.cn/CN/abstract/abstract1689.shtml Zhang Li, Zhang Jixian. Automatic DEM Generation from High-Resolution Satellite Imagery Based on Multiple-Baseline Image Matching[J].Geomatics and Information Science of Wuhan University, 2008, 33(9):943-946 http://ch.whu.edu.cn/CN/abstract/abstract1689.shtml
[12] 李晓明, 郑链, 胡占义.基于SIFT特征的遥感影像自动配准[J].遥感学报, 2006, 6(10):885-892 http://d.wanfangdata.com.cn/Periodical/ygxb200606009 Li Xiaoming, Zheng Lian, Hu Zhanyi. SIFT Based Automatic Registration of Remotely-sensed Imagery[J].Journal of Remote Sensing, 2006, 6(10):885-892 http://d.wanfangdata.com.cn/Periodical/ygxb200606009
[13] 杨化超, 姚国标, 王永波.基于SIFT的宽基线立体影像密集匹配[J].测绘学报, 2011, 40(5):537-543 http://www.cqvip.com/QK/90069X/201105/39558505.html Yang Huachao, Yao Guoji, Wang Yongbo. Dense Matching for Wide Base-line Stereo Images Based on SIFT[J]. Acta Geodaetica et Cartographica Sinica, 2011, 40(5):537-543 http://www.cqvip.com/QK/90069X/201105/39558505.html
[14] 纪松, 范大昭, 张永生等.多视匹配MVLL算法及其在ADS40线阵影像中的运用[J].武汉大学学报·信息科学版, 2009, 34(1):28-31 http://ch.whu.edu.cn/CN/abstract/abstract1127.shtml Ji Song, Fan Dazhao, Zhang Yongsheng, et al. MVLL Multi-view Matching Algorithm and its Application on ADS40 Liner Array Imagery[J]. Geomatics and Information Science of Wuhan University, 2009, 34(1):28-31 http://ch.whu.edu.cn/CN/abstract/abstract1127.shtml
-
期刊类型引用(3)
1. 王海起,陈冉,魏世清,桂丽,费涛. 利用中文微博数据的地理情感特征挖掘. 武汉大学学报(信息科学版). 2020(05): 699-708 . 百度学术
2. 别婉娟,易孜芳,肖蓊岸,万幼. 面向微博签到数据的城市社区结构挖掘. 地理信息世界. 2019(04): 68-73 . 百度学术
3. 万幼,刘耀林. 基于地理加权中心节点距离的网络社区发现算法. 武汉大学学报(信息科学版). 2019(10): 1545-1552 . 百度学术
其他类型引用(3)