多传感器光谱视频成像系统中的图像对齐研究

字崇德; 李昀谦; 祖永祥; 陈林森; 曹汛

doi:10.3788/IRLA201948.0603019

留言板

尊敬的读者、作者、审稿人, 关于本刊的投稿、审稿、编辑和出版的任何问题, 您可以本页添加留言。我们将尽快给您答复。谢谢您的支持!

姓名
邮箱
手机号码
标题
留言内容
验证码

多传感器光谱视频成像系统中的图像对齐研究

字崇德, 李昀谦, 祖永祥, 陈林森, 曹汛

文章导航 > 红外与激光工程 > 2019 > 48(6): 603019-0603019(8)

字崇德, 李昀谦, 祖永祥, 陈林森, 曹汛. 多传感器光谱视频成像系统中的图像对齐研究[J]. 红外与激光工程, 2019, 48(6): 603019-0603019(8). doi: 10.3788/IRLA201948.0603019

引用本文:

Zi Chongde, Li Yunqian, Zu Yongxiang, Chen Linsen, Cao Xun. Research on image alignment in multi-sensor spectral video imaging system[J]. Infrared and Laser Engineering, 2019, 48(6): 603019-0603019(8). doi: 10.3788/IRLA201948.0603019

Citation:

Zi Chongde, Li Yunqian, Zu Yongxiang, Chen Linsen, Cao Xun. Research on image alignment in multi-sensor spectral video imaging system[J]. Infrared and Laser Engineering, 2019, 48(6): 603019-0603019(8). doi: 10.3788/IRLA201948.0603019

多传感器光谱视频成像系统中的图像对齐研究

doi: 10.3788/IRLA201948.0603019

1.
南京大学电子科学与工程学院,江苏南京 210123

基金项目:

国家自然科学基金（61627804）

详细信息

作者简介:
字崇德(1989-),男,博士生,主要从事光谱成像技术方面的研究。Email:zichongde@smail.nju.edu.cn

中图分类号: TP751.1

Research on image alignment in multi-sensor spectral video imaging system

1.
School of Electronics Science and Engineering,Nanjing University,Nanjing 210123,China

摘要: 多光谱视频成像能够同时采集场景的空间、时间和光谱信息，可广泛应用于遥感、农业监测和材质分析等多个领域。然而传统光谱仪往往包含光学色散分光结构，系统复杂、标定困难，难以普遍推广。因此，文中搭建了一种多传感器小型化光谱视频成像系统，提出了一种基于相机姿态的多视点图像或视频快速对齐方法，实现了嵌入式平台上的多光谱视频的实时采集和对齐。通过复杂场景的实验验证，文中提出的对齐方法在PSNR、SSIM客观指数以及主观视觉评价中均取得了良好的效果。
- 多光谱成像 /
- 多视点图像对齐 /
- 立体标定 /
- 光谱分析
Abstract: Multi-spectral video imaging can simultaneously collect spatial, temporal and spectral information of scenes. It can be widely used in many fields such as remote sensing, agricultural monitoring, material analysis, etc. However, traditional spectrometers often depend on optical dispersion spectroscopy structure, which makes the system complex and difficult to calibrate, and it is difficult to popularize. Therefore, a miniaturized multi-sensor spectral video imaging system was built in this paper. A fast alignment method of multi-view image or video based on camera poses was proposed to realize real-time acquisition and alignment of multi-spectral video on embedded system. Through the experimental verification of complex scenes, the alignment method proposed in this paper has achieved desired results in both objective index (e.g. PSNR, SSIM) and subjective visual effects.
- multi-spectral imaging /
- multi-view image alignment /
- stereo calibration /
- spectral analysis

[1]	Zheng Yuquan, Wang Hui, Wang Yifang. Selection and design of optical systems for spaceborne hyperspectral imagers[J]. Optics and Precision Engineering, 2009, 17(11):2629-2637. (in Chinese)
[2]	Zhou Xiang, Zheng Hengbiao, He Jiaoyang, et al. Predicting grain yield in rice using multi-temporal vegetation indices from UAV-based multispectral and digital imagery[J]. Isprs Journal of Photogrammetry Remote Sensing, 2017, 130:246-255.
[3]	Xu Hong, Wang Xiangjun. Applications of multispectral/hyperspectral imaging technologies in military[J]. Infrared and Laser Engineering, 2007, 36(1):13-17. (in Chinese)
[4]	Mansfield J R. Multispectral imaging[J]. Veterinary Pathology, 2014, 51(1):185-210.
[5]	Zheng Yuquan, Yu Bingxi. Overview of spectrum dividing technologies in imaging spectrometers[J]. Remote Sensing, 2002, 6(1):75-80.
[6]	Cao Xun, Du Hao, Tong Xin, et al. A prism-mask system for multispectral video acquisition[J]. IEEE Transactions on Pattern Analysis and Machine Intelligence, 2011, 33(12):2423-2435.
[7]	Cao Xun, Yue Tao, Lin Xing, et al. Computational snapshot multispectral cameras:toward dynamic capture of the spectral world[J]. IEEE Signal Processing Magazine, 2016, 33(5):95-108.
[8]	Wang Xinquan, Huang Min, Gao Xiaohui, et al. Portable multispectral imager based on LCTF[J]. Acta Photonica Sinica, 2010, 39(1):71-75. (in Chinese)
[9]	Zhao Yang, Yue Tao, Chen Linsen, et al. Heterogeneous camera array for multispectral light field imaging[J]. Optics Express, 2017, 25(13):14008-14022.
[10]	Xu Liyan, Wang Jing, Qiu Jun, et al. Multi-spectral remote sensing image registration based on feature point[J]. Computer Science, 2011, 38(7):280-297.

[1]	赵慧洁, 张晓元, 贾国瑞, 邱显斐, 翟亮. 运动补偿下双通道星载高光谱成像仪图像配准 . 红外与激光工程, 2021, 50(3): 20211022-1-20211022-9. doi: 10.3788/IRLA20211022
[2]	马维喆, 董美蓉, 黄泳如, 童琪, 韦丽萍, 陆继东. 激光诱导击穿光谱的飞灰碳含量定量分析方法 . 红外与激光工程, 2021, 50(9): 20200441-1-20200441-10. doi: 10.3788/IRLA20200441
[3]	乔玉晶, 贾保明, 姜金刚, 王靖怡. 多视点立体视觉测量网络组网方法 . 红外与激光工程, 2020, 49(7): 20190492-1-20190492-8. doi: 10.3788/IRLA20190492
[4]	刘舒扬, 张晨, 赵安娜, 李奇峰, 贾晓东. 基于光谱特性的高判别准确度激光近场探测传感器研究 . 红外与激光工程, 2020, 49(4): 0403009-0403009-5. doi: 10.3788/IRLA202049.0403009
[5]	姜红, 鞠晨阳, 务瑞杰, 范烨, 满吉. 聚类分析法的塑料饮料瓶光谱分析 . 红外与激光工程, 2018, 47(8): 823002-0823002(6). doi: 10.3788/IRLA201847.0823002
[6]	周木春, 赵琦, 陈延如, 邵艳明. 基于FSVM的转炉终点光辐射状态识别 . 红外与激光工程, 2018, 47(7): 726004-0726004(6). doi: 10.3788/IRLA201847.0726004
[7]	马艳, 夏果, 黄禅, 王国栋, 金施群. 一种简单精确的CCD阵列光谱仪波长定标方法 . 红外与激光工程, 2018, 47(S1): 147-153. doi: 10.3788/IRLA201847.S117002
[8]	时东锋, 黄见, 苑克娥, 王英俭, 谢晨波, 刘东, 朱文越. 空间编码复用散斑多信息融合关联成像(特邀) . 红外与激光工程, 2018, 47(5): 502001-0502001(8). doi: 10.3788/IRLA201847.0502001
[9]	杨萍, 郭乙陆, 魏贺, 宋丹, 宋宏, 张云菲, 申屠溢醇, 刘洪波, 黄慧, 张显斗, 方美芬. 一种用于水下图像的光谱重构方法:理论及应用 . 红外与激光工程, 2017, 46(3): 323001-0323001(8). doi: 10.3788/IRLA201746.0323001
[10]	李相贤, 王振, 徐亮, 高闽光, 童晶晶, 冯明春, 刘建国. 温室气体及碳同位素比值傅里叶变换红外光谱分析的温度依赖关系研究 . 红外与激光工程, 2015, 44(4): 1178-1185.
[11]	侯晴宇, 张树青. 单探测器共孔径多光谱成像系统设计 . 红外与激光工程, 2015, 44(5): 1638-1642.
[12]	李实秋, 雷建军, 周志远, 张海龙, 范晓红. 基于SIFT 匹配的多视点立体图像零视差调整 . 红外与激光工程, 2015, 44(2): 764-768.
[13]	王子辰, 戴明, 李刚, 汪永阳, 宋悦铭, 高玉军. 基于虚拟立体靶标的线阵相机标定与分析 . 红外与激光工程, 2014, 43(3): 902-907.
[14]	李波, 赵怀慈, 花海洋. 红外多光谱图像仿真方法研究 . 红外与激光工程, 2014, 43(6): 1972-1976.
[15]	赵安新, 汤晓君, 宋娅, 张钟华, 刘君华. 光谱分析中Elastic Net 变量选择与降维方法 . 红外与激光工程, 2014, 43(6): 1977-1981.
[16]	周峰, 郑国宪, 李岩, 姚罡. 双谱段Offner光谱成像仪设计 . 红外与激光工程, 2013, 42(7): 1858-1862.
[17]	孟卫华, 倪国强, 高昆, 向静波, 项建胜. 红外高光谱成像的光谱聚焦 . 红外与激光工程, 2013, 42(3): 774-779.
[18]	张永贺, 郭啸川, 褚武道, 艾金泉, 项天宋, 郭乔影, 周毅军, 陈文惠. 基于红边位置的木荷叶片叶绿素含量估测模型研究 . 红外与激光工程, 2013, 42(3): 798-804.
[19]	李珂, 张康伟, 罗淼. 基于LCTF的大幅面高分辨率多光谱仪光学系统设计 . 红外与激光工程, 2013, 42(3): 675-679.
[20]	程巳阳, 高闽光, 徐亮, 冯明春, 张天舒, 刘建国, 刘文清. 高温气体浓度光谱分析中的温度修正方法 . 红外与激光工程, 2013, 42(2): 413-417.

点击查看大图

计量

文章访问数: 808
HTML全文浏览量: 143
PDF下载量: 161
被引次数: 0

多传感器光谱视频成像系统中的图像对齐研究

doi: 10.3788/IRLA201948.0603019

1. 南京大学电子科学与工程学院,江苏南京 210123

作者简介:
字崇德(1989-),男,博士生,主要从事光谱成像技术方面的研究。Email:zichongde@smail.nju.edu.cn

收稿日期: 2019-01-11
修回日期: 2019-02-21
刊出日期: 2019-06-25

基金项目:

国家自然科学基金（61627804）

中图分类号: TP751.1

关键词:

摘要: 多光谱视频成像能够同时采集场景的空间、时间和光谱信息，可广泛应用于遥感、农业监测和材质分析等多个领域。然而传统光谱仪往往包含光学色散分光结构，系统复杂、标定困难，难以普遍推广。因此，文中搭建了一种多传感器小型化光谱视频成像系统，提出了一种基于相机姿态的多视点图像或视频快速对齐方法，实现了嵌入式平台上的多光谱视频的实时采集和对齐。通过复杂场景的实验验证，文中提出的对齐方法在PSNR、SSIM客观指数以及主观视觉评价中均取得了良好的效果。