图像融合在空间目标三维重建中的应用

杨洪飞; 夏晖; 陈忻; 孙胜利; 饶鹏

doi:10.3788/IRLA201847.0926002

留言板

尊敬的读者、作者、审稿人, 关于本刊的投稿、审稿、编辑和出版的任何问题, 您可以本页添加留言。我们将尽快给您答复。谢谢您的支持!

姓名
邮箱
手机号码
标题
留言内容
验证码

图像融合在空间目标三维重建中的应用

杨洪飞, 夏晖, 陈忻, 孙胜利, 饶鹏

文章导航 > 红外与激光工程 > 2018 > 47(9): 926002-0926002(8)

杨洪飞, 夏晖, 陈忻, 孙胜利, 饶鹏. 图像融合在空间目标三维重建中的应用[J]. 红外与激光工程, 2018, 47(9): 926002-0926002(8). doi: 10.3788/IRLA201847.0926002

引用本文:

杨洪飞, 夏晖, 陈忻, 孙胜利, 饶鹏. 图像融合在空间目标三维重建中的应用[J]. 红外与激光工程, 2018, 47(9): 926002-0926002(8). doi: 10.3788/IRLA201847.0926002

Yang Hongfei, Xia Hui, Chen Xin, Sun Shengli, Rao Peng. Application of image fusion in 3D reconstruction of space target[J]. Infrared and Laser Engineering, 2018, 47(9): 926002-0926002(8). doi: 10.3788/IRLA201847.0926002

Citation:

Yang Hongfei, Xia Hui, Chen Xin, Sun Shengli, Rao Peng. Application of image fusion in 3D reconstruction of space target[J]. Infrared and Laser Engineering, 2018, 47(9): 926002-0926002(8). doi: 10.3788/IRLA201847.0926002

图像融合在空间目标三维重建中的应用

doi: 10.3788/IRLA201847.0926002

杨洪飞^1,2,3,
夏晖^1,3,
陈忻^1,3,
孙胜利^1,3,
饶鹏^1,3

1.
中国科学院上海技术物理研究所,上海 200083;
2.
中国科学院大学,北京 100049;
3.
中国科学院红外探测与成像技术重点实验室,上海 200083

基金项目:

国家863计划（Y4X02073N3X）

详细信息

作者简介:
杨洪飞(1988-),男,博士生,主要从事空间遥感图像信息处理方面的研究。Email:410055346@qq.com

中图分类号: TP391

Application of image fusion in 3D reconstruction of space target

Yang Hongfei^1,2,3,
Xia Hui^1,3,
Chen Xin^1,3,
Sun Shengli^1,3,
Rao Peng^1,3

1.
Shanghai Institute of Technical Physics,Chinese Academy of Sciences,Shanghai 200083,China;
2.
University of Chinese Academy of Sciences,Beijing 100049,China;
3.
Key Laboratory of Infrared Detection and Imaging,Chinese Academy of Sciences,Shanghai 200083,China

摘要: 图像融合可以获取目标更加丰富的层次和细节信息，有利于对探测目标信息的有效地获取，在包括空间目标的三维重建等应用中有着重要意义。针对空间目标的宽动态范围提出了一种多次曝光的图像融合方法，利用信息熵的非线性压缩判定图像融合权重，并引入双边滤波残差加强弱纹理的分配权重，有效地增加了图像的特征信息，提高了三维重建点云的数量。利用提出的融合方法开展了空间目标模拟成像试验，采用融合的图像对目标三维重建，并与多种不同曝光程度以及采用其他融合图像的方法进行了对比，提出的方法得到的重建点云数量相对恰当曝光状态提高了35%，重建结果优于其他方法。结果表明：将图像融合引入到三维重建中，能有效地加强了重建图像信息，避免了光照条件对目标三维重建的不利影响，获得较高质量的重建效果，该方法可以很好地应用到基于图像序列的空间目标三维重建应用中。
- 图像融合 /
- 三维重建 /
- 动态范围
Abstract: Image fusion can obtain the richer level and detail information, which is beneficial to the effective acquisition of the detection target information. It is of great significance in applications including 3D reconstruction of space targets. A multi-exposure image fusion method that the non-linear compression of information entropy was used to determine the image fusion weight and the bilateral filter residual was introduced to enhance the weight of the weak texture for the wide dynamic range of space objects proposed. It effectively increased the feature information of the image and the number of 3D reconstruction cloud points. The space object imaging experiment was carried out by using the fusion method. The number of reconstructed point clouds obtained was improved by 35% compared with well-exposure and the reconstruction results were better than other methods. The results show that 3D reconstruction algorithm based on image sequence combined with image fusion could effectively enhance the reconstructed image information and avoid the adverse effects of illumination conditions on the three-dimensional reconstruction of the target, resulting in high quality reconstruction effect, the method can be well applied to the three-dimensional reconstruction of space targets based on image sequences.
- image fusion /
- 3D reconstruction /
- dynamic range

[1]	Zhang Haopeng, Wei Quanmao, Zhang Wei, et al. Sequential-image-based space object 3D reconstruction[J]. Journal of Beijing University of Aeronautics and Astronautics, 2016, 42(2):273-279. (in Chinese)张浩鹏, 魏全茂, 张威, 等. 基于序列图像的空间目标三维重建[J]. 北京航空航天大学学报, 2016, 42(2):273-279.
[2]	Sun C M, Yuan Y, Zhou Z. Modeling for space-based visible imaging characteristics of space object[C]//SPIE Optical Engineering Applications, 2015, 9598:959807.
[3]	Bruce N D B. ExpoBlend:Information preserving exposure blending based on normalized log-domain entropy[J]. Computers Graphics, 2014, 39(2):12-23.
[4]	Mertens T, Kautz J, Reeth F V. Exposure fusion[C]//Conference on IEEE Computer Graphics and Applications, 2007:382-390.
[5]	Jiang W F, Zhang F, Chen Z B. Image filtering based on structural information:US, US8965141[P]. 2015.
[6]	Reinhard E, Devlin K. Dynamic range reduction inspired by photoreceptor physiology[C]//IEEE Educational Activities Department, 2005.
[7]	Fraundorfer F, Scaramuzza D. Visual odometry:Part Ⅱ-matching, robustness, and application[C]//IEEE, 2012, 19(2):78-90.
[8]	Schnberger J L, Frahm J M. Structure-from-Motion revisited[C]//CVPR, 2016:445.
[9]	Crocco M, Rubino C, Bue A D. Structure from Motion with objects[C]//IEEE Conference on Computer Vision and Pattern Recognition, 2016:4141-4149.
[10]	Furukawa Y, Ponce J. Accurate, dense, and robust multi-view stereopsis[C]//IEEE Conference on Computer Vision and Pattern Recognition, 2007:1-8.

[1]	李铁军, 薛路明, 刘今越, 贾晓辉. 基于辅助相机的景深拓展三维重建技术研究 . 红外与激光工程, 2023, 52(4): 20220647-1-20220647-9. doi: 10.3788/IRLA20220647
[2]	谭威, 宋闯, 赵佳佳, 梁欣凯. 基于多层级图像分解的图像融合算法 . 红外与激光工程, 2022, 51(8): 20210681-1-20210681-9. doi: 10.3788/IRLA20210681
[3]	孙茜, 薛庆生, 张冬雪, 白皓轩. 水下目标物三维激光重建方法研究 . 红外与激光工程, 2022, 51(8): 20210693-1-20210693-7. doi: 10.3788/IRLA20210693
[4]	王素琴, 陈太钦, 张峰, 石敏, 朱登明. 面向复杂机械零件形貌测量的高精度三维重建方法 . 红外与激光工程, 2022, 51(7): 20210730-1-20210730-11. doi: 10.3788/IRLA20210730
[5]	朱新军, 侯林鹏, 宋丽梅, 袁梦凯, 王红一, 武志超. 基于虚拟双目的条纹结构光三维重建 . 红外与激光工程, 2022, 51(11): 20210955-1-20210955-9. doi: 10.3788/IRLA20210955
[6]	曾瀚林, 孟祥勇, 钱惟贤. 高斯差分滤波图像融合方法 . 红外与激光工程, 2020, 49(S1): 20200091-20200091. doi: 10.3788/IRLA20200091
[7]	吴庆阳, 黄浩涛, 陈顺治, 李奇锋, 陈泽锋, 卢晓婷. 基于结构光标记的光场三维成像技术研究 . 红外与激光工程, 2020, 49(3): 0303019-0303019-6. doi: 10.3378/IRLA202049.0303019
[8]	李永强, 赵占平, 徐彭梅, 王静怡, 郭永祥. 大动态范围微光相机的辐射定标 . 红外与激光工程, 2019, 48(S1): 78-82. doi: 10.3788/IRLA201948.S117002
[9]	丁忠军, 赵子毅, 张春堂, 潘文超, 刘雨萌. 载人潜水器的深海地貌线结构光三维重建 . 红外与激光工程, 2019, 48(5): 503001-0503001(9). doi: 10.3788/IRLA201948.0503001
[10]	张家民, 时东锋, 黄见, 王英俭. 图像融合在偏振关联成像中的应用 . 红外与激光工程, 2018, 47(12): 1226002-1226002(7). doi: 10.3788/IRLA201847.1226002
[11]	龚肖, 史金龙, 廖芳. 点特征柔性物体三维运动恢复方法 . 红外与激光工程, 2018, 47(9): 917009-0917009(7). doi: 10.3788/IRLA201847.0917009
[12]	洪汉玉, 范艳, 邓哲煜, 时愈. 动目标多视角观测图像的三维去模糊方法 . 红外与激光工程, 2016, 45(2): 228001-0228001(8). doi: 10.3788/IRLA201645.0228001
[13]	杨桄, 童涛, 孟强强, 孙嘉成. 基于梯度加权的红外与可见光图像融合方法 . 红外与激光工程, 2014, 43(8): 2772-2779.
[14]	张宝辉, 闵超波, 窦亮, 张俊举, 常本康. 目标增强的红外与微光图像融合算法 . 红外与激光工程, 2014, 43(7): 2349-2353.
[15]	张勇刚, 孙娜, 李宁, 梁宏. 基于MEMS 陀螺辅助增大闭环光纤陀螺动态范围的方法 . 红外与激光工程, 2014, 43(9): 3070-3074.
[16]	杨宇, 阚凌雁, 于佳, 王姣姣, 元光, 王金城. 基于激光扫描的人脸三维重建方法 . 红外与激光工程, 2014, 43(12): 3946-3950.
[17]	毛海岑, 刘爱东. 利用证据理论的图像融合方法 . 红外与激光工程, 2013, 42(6): 1642-1646.
[18]	张勇, 金伟其. 夜视融合图像质量主观评价方法 . 红外与激光工程, 2013, 42(2): 528-532.
[19]	张勇, 金伟其. 夜视融合图像质量客观评价方法 . 红外与激光工程, 2013, 42(5): 1360-1365.
[20]	都琳, 李迎春, 郭惠超, 范有臣. 互相关法实现距离选通远距离目标的三维重建 . 红外与激光工程, 2013, 42(7): 1725-1729.

点击查看大图

计量

文章访问数: 574
HTML全文浏览量: 100
PDF下载量: 53
被引次数: 0

图像融合在空间目标三维重建中的应用

doi: 10.3788/IRLA201847.0926002

1. 中国科学院上海技术物理研究所,上海 200083;

2. 中国科学院大学,北京 100049;

3. 中国科学院红外探测与成像技术重点实验室,上海 200083

作者简介:
杨洪飞(1988-),男,博士生,主要从事空间遥感图像信息处理方面的研究。Email:410055346@qq.com

收稿日期: 2018-04-05
修回日期: 2018-05-03
刊出日期: 2018-09-25

基金项目:

国家863计划（Y4X02073N3X）

中图分类号: TP391

关键词:

摘要: 图像融合可以获取目标更加丰富的层次和细节信息，有利于对探测目标信息的有效地获取，在包括空间目标的三维重建等应用中有着重要意义。针对空间目标的宽动态范围提出了一种多次曝光的图像融合方法，利用信息熵的非线性压缩判定图像融合权重，并引入双边滤波残差加强弱纹理的分配权重，有效地增加了图像的特征信息，提高了三维重建点云的数量。利用提出的融合方法开展了空间目标模拟成像试验，采用融合的图像对目标三维重建，并与多种不同曝光程度以及采用其他融合图像的方法进行了对比，提出的方法得到的重建点云数量相对恰当曝光状态提高了35%，重建结果优于其他方法。结果表明：将图像融合引入到三维重建中，能有效地加强了重建图像信息，避免了光照条件对目标三维重建的不利影响，获得较高质量的重建效果，该方法可以很好地应用到基于图像序列的空间目标三维重建应用中。

English Abstract

Application of image fusion in 3D reconstruction of space target

1. Shanghai Institute of Technical Physics,Chinese Academy of Sciences,Shanghai 200083,China;

2. University of Chinese Academy of Sciences,Beijing 100049,China;

3. Key Laboratory of Infrared Detection and Imaging,Chinese Academy of Sciences,Shanghai 200083,China

Received Date: 2018-04-05
Rev Recd Date: 2018-05-03
Publish Date: 2018-09-25

Keywords:

Abstract: Image fusion can obtain the richer level and detail information, which is beneficial to the effective acquisition of the detection target information. It is of great significance in applications including 3D reconstruction of space targets. A multi-exposure image fusion method that the non-linear compression of information entropy was used to determine the image fusion weight and the bilateral filter residual was introduced to enhance the weight of the weak texture for the wide dynamic range of space objects proposed. It effectively increased the feature information of the image and the number of 3D reconstruction cloud points. The space object imaging experiment was carried out by using the fusion method. The number of reconstructed point clouds obtained was improved by 35% compared with well-exposure and the reconstruction results were better than other methods. The results show that 3D reconstruction algorithm based on image sequence combined with image fusion could effectively enhance the reconstructed image information and avoid the adverse effects of illumination conditions on the three-dimensional reconstruction of the target, resulting in high quality reconstruction effect, the method can be well applied to the three-dimensional reconstruction of space targets based on image sequences.