留言板

尊敬的读者、作者、审稿人, 关于本刊的投稿、审稿、编辑和出版的任何问题, 您可以本页添加留言。我们将尽快给您答复。谢谢您的支持!

姓名
邮箱
手机号码
标题
留言内容
验证码

基于区域分割与融合的全景稳像算法

尹丽华 李范鸣 刘士建

尹丽华, 李范鸣, 刘士建. 基于区域分割与融合的全景稳像算法[J]. 红外与激光工程, 2018, 47(9): 926004-0926004(10). doi: 10.3788/IRLA201847.0926004
引用本文: 尹丽华, 李范鸣, 刘士建. 基于区域分割与融合的全景稳像算法[J]. 红外与激光工程, 2018, 47(9): 926004-0926004(10). doi: 10.3788/IRLA201847.0926004
Yin Lihua, Li Fanming, Liu Shijian. Panoramic image stabilization algorithm based on region segmentation and fusion[J]. Infrared and Laser Engineering, 2018, 47(9): 926004-0926004(10). doi: 10.3788/IRLA201847.0926004
Citation: Yin Lihua, Li Fanming, Liu Shijian. Panoramic image stabilization algorithm based on region segmentation and fusion[J]. Infrared and Laser Engineering, 2018, 47(9): 926004-0926004(10). doi: 10.3788/IRLA201847.0926004

基于区域分割与融合的全景稳像算法

doi: 10.3788/IRLA201847.0926004
基金项目: 

国家863计划(2011AA7031002G);中国科学院上海技术物理研究所创新基金(CX-122)

详细信息
    作者简介:

    尹丽华(1988-),女,博士生,主要从事数字图像处理、模式识别、视频稳像等方面的研究。Email:yinlihua_1122@126.com

  • 中图分类号: TP391.4

Panoramic image stabilization algorithm based on region segmentation and fusion

  • 摘要: 车载红外全景扫描成像系统具有每列单独成像、360全方位视场覆盖的特点,从而导致传统的电子稳像算法无法直接适用,因此,提出一种基于区域分割与融合的全景稳像算法。首先,通过局部列偏移调整方法对图像预补偿。接着,以车头前进方向为基准,对全景图像进行区域分割,即前端、右端、后端、左端区域。然后,根据各区域的成像特点,选择不同的稳像模型进行稳像,其中,运动估计环节采用滑窗策略缩短运算时间,运动补偿环节采用未定义区重构方法弥补边界缺失信息。最后,利用局部区域扩展、渐入渐出加权平均融合方式对重叠区域进行区域拼接、融合,保证全景图像无缝拼接。实验结果表明:该算法有效解决了车体行进过程中红外全景扫描系统的稳像问题,稳像关键指标帧间峰值信噪比(PSNR)可以提高14.7%,运行时间可缩短为传统算法的1/10,基本满足了工程应用的需求。
  • [1] Jia Juntao, Tang Yuefeng, Mao Xin, et al. Design and implement of infrared panoramic scanning and tracking imaging system[J]. Journal of Applied Optics, 2013, 34(3):407-412. (in Chinese)贾俊涛, 唐跃峰, 毛鑫,等. 红外全景扫描跟踪成像系统设计与实现[J]. 应用光学, 2013, 34(3):407-412.
    [2] Zhang Haojun. Research on key technologies for infrared image restoration, video stabilization and imaging system based on embedded system[D]. Beijing:University of Chinese Academy of Sciences, 2012. (in Chinese)张浩钧. 红外系统中电子复原、稳像及嵌入式成像系统关键技术研究[D]. 北京:中国科学院大学, 2012.
    [3] Lai Lijun, Xu Zhiyong, Zhang Xuyao. Improved gradient optical flow for digital image stabilization[J]. Infrared and Laser Engineering, 2016, 45(4):0428004. (in Chinese)赖丽君, 徐智勇, 张栩铫. 应用于稳像系统中的改进梯度光流法[J]. 红外与激光工程, 2016, 45(4):0428004.
    [4] Ma Tianyi, Zhang Huixiang, Song Minmin, et al. Anti-occluded infrared target tracking with salient feature space[J].Infrared and Laser Engineering, 2017, 46(3):0304002. (in Chinese)马天义, 张会香, 宋敏敏, 等. 引入显著特征空间的抗遮挡红外目标跟踪[J]. 红外与激光工程, 2017, 46(3):0304002.
    [5] Li Bo, Wang Xiaotong, Yang Changqing, et al. Three-point locally adaptive searching in gray scale projection algorithm for electronic image stabilization[J]. Opto-Electronic Engineering, 2004, 31(9):69-72. (in Chinese)李博, 王孝通, 杨常青, 等. 电子稳像的灰度投影三点局域自适应搜索算法[J]. 光电工程, 2004, 31(9):69-72.
    [6] Yang W, Zhang Z, Zhang Y, et al. Real-time digital image stabilization based on regional field image gray projection[J]. Journal of Systems Engineering and Electronics, 2016, 27(1):224-231.
    [7] Cai Chengtao, Liang Xiaolong, Tan Jilai, et al. Adaptive optimal block matching video stabilization algorithm[J].Systems Engineering and Electronics, 2013, 35(6):1324-1329. (in Chinese)蔡成涛, 梁小龙, 谭吉来, 等. 自适应最优块匹配视频稳像算法[J]. 系统工程与电子技术, 2013, 35(6):1324-1329.
    [8] Zhang Kun, Xu Tingfa, Wang Ping, et al. Real-time full-frame digital image stabilization system by SURF[J]. Optics and Precision Engineering, 2011, 19(8):1964-1972. (in Chinese)张坤, 许廷发, 王平,等. 高精度实时全帧频SURF电子稳像方法[J]. 光学精密工程, 2011, 19(8):1964-1972.
    [9] Zhao H, Wang T. Image stabilization algorithm based on multi-bitplane[C]//SPIE, 2009, 7384:325-331.
    [10] Xing Hui, Yan Jinglong, Zhang Shujiang. Digital image stabilization algorithm based on phase correlation[J]. Opto-Electronic Engineering, 2007, 34(3):37-41. (in Chinese)邢慧, 颜景龙, 张树江. 基于相位相关的数字稳像算法研究[J]. 光电工程, 2007, 34(3):37-41.
    [11] Zhu Qidan, Xu Congying, Cai Chengtao. Electronic image stabilization algorithm for on board catadioptric omnidirectional vision system[J]. Journal of Jilin University(Engineering and Technology Edition), 2015, 45(4):1288-1296. (in Chinese)朱齐丹, 徐从营, 蔡成涛. 船载折反射全景视觉系统电子稳像算法[J]. 吉林大学学报(工学版), 2015, 45(4):1288-1296.
    [12] Ma Ziling, Wang Jianzhong. Research on electronic image stabilizing algorithm of catadioptric panoramic reconnaissance system[J]. Transactions of Beijing Institute of Technology, 2010, 30(12):1475-1479. (in Chinese)马子领, 王建中. 折反射全景侦察系统电子稳像技术研究[J]. 北京理工大学学报, 2010, 30(12):1475-1479.
    [13] Litvin A, Konrad J, Karl W C. Probabilistic video stabilization using Kalman filtering and mosaicing[C]//SPIE, 2003, 5022:663-674.
    [14] Matsushita Y, Ofek E, Ge W, et al. Full-frame video stabilization with motion inpainting.[J]. IEEE Transactions on Pattern Analysis Machine Intelligence, 2006, 28(7):1150-1163.
    [15] Yin Lihua, Li Fanming, Liu Shijian, et al. The image correction technology for optical panoramic imaging system[J]. Opto-Electronic Engineering, 2016, 43(8):53-58. (in Chinese)尹丽华, 李范鸣, 刘士建,等. 光电全景成像系统的图像校正技术[J]. 光电工程, 2016, 43(8):53-58.
  • [1] 朱煜, 颜识涵, 臧子漪, 宋盛星, 王洁, 茹占强, 崔洪亮, 宋贺伦.  太赫兹扫描成像在高通量测量铜合金薄膜电导中的应用(特邀) . 红外与激光工程, 2022, 51(4): 20210942-1-20210942-11. doi: 10.3788/IRLA20210942
    [2] 王浩, 石志城, 宫辉, 王军, 唐绍凡.  星载斜视等距扫描成像 . 红外与激光工程, 2022, 51(3): 20210390-1-20210390-6. doi: 10.3788/IRLA20210390
    [3] 苏云征, 郝群, 曹杰, 闫雷, 武帅.  合并分割块的点云语义分割方法 . 红外与激光工程, 2021, 50(10): 20200482-1-20200482-10. doi: 10.3788/IRLA20200482
    [4] 姜云, 郭锐, 刘荣忠, 武军安.  末敏弹线阵列激光雷达的距离像分割方法 . 红外与激光工程, 2020, 49(1): 0126002-0126002(8). doi: 10.3788/IRLA202049.0126002
    [5] 杨凌辉, 张正吉, 林嘉睿, 王金旺, 徐秋宇, 刘博文.  融合光电扫描定位的大构件整体形貌测量方法 . 红外与激光工程, 2019, 48(5): 503002-0503002(8). doi: 10.3788/IRLA201948.0503002
    [6] 张家民, 时东锋, 黄见, 王英俭.  图像融合在偏振关联成像中的应用 . 红外与激光工程, 2018, 47(12): 1226002-1226002(7). doi: 10.3788/IRLA201847.1226002
    [7] 熊晶莹, 戴明, 赵春蕾.  红外激光车载云台去抖动设计 . 红外与激光工程, 2018, 47(1): 126002-0126002(7). doi: 10.3788/IRLA201847.0126002
    [8] 裴晓敏, 范慧杰, 唐延东.  时空特征融合深度学习网络人体行为识别方法 . 红外与激光工程, 2018, 47(2): 203007-0203007(6). doi: 10.3788/IRLA201847.0203007
    [9] 刘国栋, 尹哲, 刘炳国, 卢丙辉, 魏富鹏, 庄志涛, 甘雨, 陈凤东, 张大权.  单根多模光纤数字扫描成像方法 . 红外与激光工程, 2017, 46(4): 422002-0422002(6). doi: 10.3788/IRLA201746.0422002
    [10] 于洋, 王世勇, 蹇毅, 陈珺, 代具亭.  面阵探测器连续扫描成像光学系统 . 红外与激光工程, 2016, 45(1): 118002-0118002(5). doi: 10.3788/IRLA201645.0118002
    [11] 费凯, 张璐, 朱飞虎, 张旭, 屠大维.  融合LIDAR 的激光同步扫描三角测量系统的设计 . 红外与激光工程, 2015, 44(8): 2358-2363.
    [12] 张铁, 李波, 邹焱飚.  基于条纹式激光传感器与机器人的扫描成像系统 . 红外与激光工程, 2015, 44(1): 53-58.
    [13] 任航.  改进的航空全帧型面阵CCD相机电子式像移补偿方法 . 红外与激光工程, 2015, 44(5): 1558-1563.
    [14] 孙斌, 常本康, 张俊举, 王贵圆, 李英杰.  基于红外运动目标分割的夜视融合系统设计 . 红外与激光工程, 2015, 44(7): 2064-2069.
    [15] 龚卫国, 刘润瑶, 张睿.  光照突变下融合多类特征的场景分割方法 . 红外与激光工程, 2014, 43(12): 4164-4169.
    [16] 杨一帆, 田雁, 杨帆, 黄彪.  基于改进Mean-Shift 算法的红外小目标跟踪 . 红外与激光工程, 2014, 43(7): 2164-2169.
    [17] 周强, 赵巨峰, 冯华君, 徐之海, 李奇, 陈跃庭.  基于偏振成像的红外图像增强 . 红外与激光工程, 2014, 43(1): 39-47.
    [18] 陈晓露, 戴明, 葛明, 郎小龙.  快速平滑点特征轨迹电子稳像 . 红外与激光工程, 2014, 43(6): 1988-1993.
    [19] 曹忆南, 王新伟, 周燕.  距离选通激光成像空间定位模糊C均值聚类分割法 . 红外与激光工程, 2013, 42(10): 2682-2686,2696.
    [20] 乔立永, 徐立新, 高敏.  红外成像制导二维斜分最大熵分割的快速实现 . 红外与激光工程, 2013, 42(7): 1691-1699.
  • 加载中
计量
  • 文章访问数:  385
  • HTML全文浏览量:  84
  • PDF下载量:  59
  • 被引次数: 0
出版历程
  • 收稿日期:  2018-04-21
  • 修回日期:  2018-05-30
  • 刊出日期:  2018-09-25

基于区域分割与融合的全景稳像算法

doi: 10.3788/IRLA201847.0926004
    作者简介:

    尹丽华(1988-),女,博士生,主要从事数字图像处理、模式识别、视频稳像等方面的研究。Email:yinlihua_1122@126.com

基金项目:

国家863计划(2011AA7031002G);中国科学院上海技术物理研究所创新基金(CX-122)

  • 中图分类号: TP391.4

摘要: 车载红外全景扫描成像系统具有每列单独成像、360全方位视场覆盖的特点,从而导致传统的电子稳像算法无法直接适用,因此,提出一种基于区域分割与融合的全景稳像算法。首先,通过局部列偏移调整方法对图像预补偿。接着,以车头前进方向为基准,对全景图像进行区域分割,即前端、右端、后端、左端区域。然后,根据各区域的成像特点,选择不同的稳像模型进行稳像,其中,运动估计环节采用滑窗策略缩短运算时间,运动补偿环节采用未定义区重构方法弥补边界缺失信息。最后,利用局部区域扩展、渐入渐出加权平均融合方式对重叠区域进行区域拼接、融合,保证全景图像无缝拼接。实验结果表明:该算法有效解决了车体行进过程中红外全景扫描系统的稳像问题,稳像关键指标帧间峰值信噪比(PSNR)可以提高14.7%,运行时间可缩短为传统算法的1/10,基本满足了工程应用的需求。

English Abstract

参考文献 (15)

目录

    /

    返回文章
    返回