航空光电侦察图像质量影响因素分析

王惠林, 刘吉龙, 吴雄雄, 栾亚东

王惠林, 刘吉龙, 吴雄雄, 栾亚东. 航空光电侦察图像质量影响因素分析[J]. 应用光学, 2021, 42(5): 817-829. DOI: 10.5768/JAO202142.0502001
引用本文: 王惠林, 刘吉龙, 吴雄雄, 栾亚东. 航空光电侦察图像质量影响因素分析[J]. 应用光学, 2021, 42(5): 817-829. DOI: 10.5768/JAO202142.0502001
WANG Huilin, LIU Jilong, WU Xiongxiong, LUAN Yadong. Image quality influencing factors for aerial electro-optical detection[J]. Journal of Applied Optics, 2021, 42(5): 817-829. DOI: 10.5768/JAO202142.0502001
Citation: WANG Huilin, LIU Jilong, WU Xiongxiong, LUAN Yadong. Image quality influencing factors for aerial electro-optical detection[J]. Journal of Applied Optics, 2021, 42(5): 817-829. DOI: 10.5768/JAO202142.0502001

航空光电侦察图像质量影响因素分析

基金项目: 空军预研课题
详细信息
    作者简介:

    王惠林(1971—),男,硕士,研究员,博士生导师,主要从事机载光电总体方面的研究。E-mail:wanghuilin1971@sina.com

    通讯作者:

    吴雄雄(1992—),男,博士,高级工程师,主要从事光学设计方面的研究。E-mail:wuxx1992yygx@126.com

  • 中图分类号: TN206

Image quality influencing factors for aerial electro-optical detection

  • 摘要: 从航空光电侦察系统的实际需求,首先图像信息的角度研究图像质量优劣的定性和定量因素,提出一种基于相似特征区域提取的图像清晰度评价方法,使得图像清晰度的主观感受与客观评价相匹配。其次从成像系统的光学评价角度分析影响成像质量的光学传递函数、像差、透过率等因素及其相互关系,然后依据多波段长焦反射式光学系统进行试验结果验证。最后,结合工程实践提升成像质量的要求,指出光学成像系统研制中应重点关注的几个方面,并针对多波段长焦反射式光学系统,给出具体参数建议。
    Abstract: For the actual demands of the aerial electro-optical detection system, firstly, the qualitative and quantitative factors for evaluating the optical image quality were analyzed from the perspective of image information, an image definition evaluation method based on similar feature region extraction was proposed to achieve the matching between the subjective feeling and objective evaluation of the image definition. Then, from the perspective of the optical evaluation of imaging system, the optical transfer function, aberration, transmittance and other factors affecting the imaging quality were analyzed, and according to the multi-band long focal reflective optical system, the experimental results were verified. Finally, combined with the requirements for engineering practice to improve the imaging quality, several aspects that should be given more attention in the development of optical imaging system were pointed out. And for the multi-band long focal reflective optical system, some specific parameter suggestions were given.
  • 鱼眼和复眼是自然界两种典型的广角成像系统。仿生鱼眼镜头是利用鱼眼广角成像原理设计的短焦距镜头,视场可超过180°[1],缺点是镜组复杂,畸变大且分辨率不高,特别是边缘视场的变形非常明显,多用于视频监控。与高等动物的单眼不一样,昆虫的视觉由复眼产生。复眼系统由许多小眼构成,例如蜻蜓每只复眼有28 000个小眼。这些小眼排列成球面上的阵列,以获得接近240°的大视场。但是小眼直径一般为15 μm~50 μm,其承担的局部视场仅有几度,分辨能力比人眼低,视力仅1 m左右[2]

    事实上,大视场和高分辨率是成像系统设计的一对根本矛盾[3-6],究其根本在于系统的空间带宽积(space-bandwidth product,SBP)受限,SBP可解释为像平面上能够解析的点数[7-8]。提高SBP意味着随着成像系统尺度的增大,系统复杂性也迅速增加,以平衡几何像差的影响,达到或接近衍射受限条件。成像系统设计遵循基本的比例缩放规律,即焦距、口径及其他长度量纲的参数增大M倍,横轴像差与波像差随之同比例增大,而所有角度、曲率参数保持不变。多尺度成像原理正是根据比例缩放规律,采用两级或多级成像,在大视场与小像差之间取得平衡。美国杜克大学Brady研究小组首先提出多尺度设计的概念[8],将成像系统分为物镜透镜组和后端小相机阵列两部分,并先后公开了系列十亿像素级相机的多尺度设计结果[3, 10-14]

    从仿生学的角度看,这种多尺度设计是混合了鱼眼-复眼的仿生结构。前级为仿生鱼眼的物镜设计,其尺度与集光率及角分辨率指标匹配,且像面为同心球面,而不必是传统镜头所要求的平面;次级为仿生复眼的小型目镜阵列,排列成球面形状,将物镜成像中继到各个目镜的像平面探测器阵列上。目镜阵列因口径较小,能很好地校正局部小视场的像差,并且制造成本不高,可以适当增加复杂性,实现接近衍射极限的高清成像。

    参考十亿像素相机设计[15],物镜结构为同心双胶合球透镜,设计波长为可见光(486.132 7 nm、587.561 8 nm和656.272 5 nm)。中心为整球,材料为成都光明的K9玻璃;与整球胶合的是2个半球窝透镜,外径为129.6 mm,材料为成都光明的F4玻璃。该设计具有球对称性,对于次级小口径目镜来说像差都是相同的,因而可用完全相同的目镜阵列。目镜设计主要平衡球差和色差,基于双高斯镜头结构,材料为成都光明的低成本玻璃,口径约为10 mm,以各面的曲率半径和光学间隙为优化变量进行优化。整个两级成像系统的光学设计如图 1所示,相邻目镜的光轴夹角为5°,全视场大于±50°。

    图  1  双层同心球透镜作为物镜的成像系统设计
    Figure  1.  Imaging system design using concentric double ball lenses as objective

    系统孔径光阑的直径为4.38 mm,设在目镜组中第2个双胶合透镜前。系统主要参数如下:有效焦距f=52.667 6 mm,总长L=286.062 2 mm,像方光圈数F=3.2,入瞳孔径EPD=16.458 4 mm。在中间波长λ=587.56 nm下按照望远系统计算角分辨率为δ=43.55 μrad(9.0″)。选用MT9J003 CMOS探测器,静态模式像面尺寸为6.119 mm×4.589 mm,像素数3 664×2 748,像素尺寸1.67 μm×1.67 μm,对应CMOS满视场为±(3.32°×2.49°)。

    由于目镜阵列是关于物镜球心对称的,每个目镜的成像性能即代表了全视场的成像性能。图 2(a)为单路目镜对无穷远目标成像的0~2.5°视场全色调制传递函数(modulation transfer function,MTF)曲线,±2°视场内在200 lp/mm频率处的MTF均大于或接近0.3,具有很好的像质。因图像拼接要求视场重叠(渐晕),2.5°视场的子午MTF下降较明显。图 2(b)是畸变,在边缘视场2.5°的畸变小于3%。另一方面,将物距从无穷远依次调整为5 km和300 m,发现无需调焦,MTF和弥散斑变化很小,说明系统具有很大的景深,可同时在300 m至无穷远目标较好成像。进一步,将物距改为20 m,通过像面位置调整(约0.14 mm),也可以得到很好的MTF,说明系统适当调焦后也可用于近距离目标成像。

    图  2  双层同心球透镜作为物镜的系统成像性能
    Figure  2.  Imaging performance using concentric double ball lenses as objective

    将物镜和单路目镜的两级成像系统组装在一起后,首先采用波面干涉仪测量系统波像差。测量原理如图 3(a)所示,波面干涉仪发出准直光入射到物镜上,在像平面处聚焦于一点;与该点共焦放置一个标准球面反射镜,可将测试光束原路返回并最终回到干涉仪,与干涉仪镜头参考面形成干涉,干涉图反映了系统波前误差的大小。图 3(b)是测量现场照片,图 3(c)是波前误差测量结果,由于中心存在反射鬼像,PV值受噪声点影响较明显,RMS值为0.043λ,满足Maréchal判据,即可认为系统成像接近衍射极限。

    图  3  成像系统的波前误差测试
    Figure  3.  Wavefront error measurement of imaging system

    图 4(a)是成像系统获取的3 km距离目标图像,其中近处距离约100 m的树枝树叶清晰可见,远处嘉熙中心大楼距离约3 km,局部放大后如图 4(b)所示,大楼顶部“JIAXI CENTER”字样清晰可见(裸眼不可见),说明相机具有大景深特点。

    图  4  距离3 km目标图像
    Figure  4.  Image of buildings 3 km far away

    图 5(a)是获取的距离7.4 km的顺天国际金融中心图像,局部放大图像如图 5(b),“顺天IFC”、“中国铁建”等字样清晰可见,玻璃窗格、塔吊桁架甚至楼顶避雷针等细长目标也清晰可辨。

    图  5  距离7.4 km目标图像
    Figure  5.  Image of buildings 7.4 km far away

    图 6(a)6(b)为距离20 m和40 m的USAF-1951分辨率板所成的像,据此估算系统的角分辨率为8″~10″,与系统对无穷远目标成像的分辨率设计指标相当。

    图  6  USAF-1951分辨率板成像
    Figure  6.  Images of USAF-1951 resolution test target

    采用双层同心球透镜形式的物镜,要求半球碗与被包覆的中心球的曲率半径相等,2个透镜材料的热膨胀系数以及折射率必须匹配,使得可选材料受限,力学稳定性和热稳定性较差,且制造成本较高,还存在胶合偏心的影响。尽管物镜采用多层同心球的形式确实能够得到更好的中继像质[6],由于次级目镜系统具有很强的像差校正能力,为了简化物镜系统,完全可用单个球透镜形式,其剩余像差通过优化目镜系统进行校正。因此尝试物镜采用直径129.6 mm单一球透镜结构,玻璃材料选用K9。小口径的目镜组设计仍然基于双高斯镜头结构,包括依次布置的双凸透镜、2个双胶合透镜、调焦镜组以及焦平面探测器。为降低成本,目镜组所有透镜均为平面或球面透镜。通过优化曲率半径、光学间隙等参数,得到设计结果如图 7所示。

    图  7  单个球透镜作为物镜的成像系统设计
    Figure  7.  Imaging system design using single ball lens as objective

    同样由于球对称性,各目镜完全相同,只需考察单路目镜对局部小视场的像差校正能力。系统主要参数:有效焦距f=50.379 8 mm,总长L=264.725 mm,像方光圈数F=2.974,入瞳孔径EPD=16.939 4 mm。图 8(a)所示为系统在无穷远物距、0~3.5°视场下的单路目镜成像的全色MTF,图 8(b)是畸变,在边缘视场3.5°的畸变约为4.5%。调整物距,发现该系统同样具有大景深特点。

    图  8  单个球透镜作为物镜的系统成像性能
    Figure  8.  Imaging performance using single ball lens as objective

    图 8图 2对比可见采用单个球透镜物镜的成像系统通过目镜的像差校正,甚至成像性能比双层同心球透镜物镜的成像系统更优:局部小视场可达到±3.5°,从而可满视场成像且相邻目镜的重叠视场更大,镜筒之间的间隔也可以更大,有利于光机设计;±2°视场内在200 lp/mm频率处的MTF均大于或接近0.3,子午面内的边缘视场±3.5°处MTF仍然大于0.1。

    图 9是该系统的光机设计,采用免装调物镜镜筒结构,前端与球透镜配合,后端球冠曲率中心与球透镜中心重合,球冠上布满阵列孔,用于装配目镜阵列。该系统正在进行透镜和镜筒的加工,从光学设计结果对比看,有望获得优于图 4~图 6的成像质量,后续将进行广角目标成像实验,完成阵列图像获取与拼接。

    图  9  单个球透镜作为物镜的成像系统光机设计
    Figure  9.  Optomechanical design of imaging system using single ball lens as objective

    混合仿生的两级成像系统很好地解决了大视场与高分辨率的矛盾,其中物镜采用仿生鱼眼的球透镜结构,增大入瞳孔径收集广角目标光线;目镜采用仿生复眼结构,通过小口径透镜组阵列进行像差校正实现近衍射极限成像。设计结果表明,物镜采用单个球透镜也可以获得与双层同心球透镜相当甚至更优的成像性能,从而避免双胶合球透镜带来的公差控制和力学及热稳定性问题。系统可在100°全视场内达到角分辨率优于10″、畸变小于5%的指标,应用于侦查监控等领域,可实现广角目标的高清成像。

  • 图  1   利用高斯滤波器产生的模糊图像序列

    Figure  1.   Blurred image sequence generated by Gaussian filter

    图  2   归一化清晰度评价值

    Figure  2.   Normalized value of definition evaluation

    图  3   3套不同样机对同一目标场景成像效果

    Figure  3.   Imaging effect of three different cameras on same target scene

    图  4   归一化清晰度评价值

    Figure  4.   Normalized value of definition evaluation

    图  5   最大图像相似区域自动提取原理

    Figure  5.   Principle of automatic extraction of maximum image similar region

    图  6   图像序列最大相似区域检测结果

    Figure  6.   Test results of maximum similar region in image sequence

    图  7   基于相似区域检测的图像清晰度评价结果

    Figure  7.   Image definition evaluation results based on similar region detection

    图  8   MTF求解和对应的MTFA结果

    Figure  8.   MTF solution and corresponding MTFA results

    图  9   MTF、NEM(CTF)和MTFA的关系

    Figure  9.   The relationship between MTF, NEM (CTF) and MTFA

    图  10   函数关系曲线图

    Figure  10.   Curves of function relationship

    图  11   函数关系曲线图

    Figure  11.   Curves of function relationship

    图  12   杂光系数与MTF的关系曲线

    Figure  12.   Curves of relationship between stray light coefficient and MTF

    图  13   第2、3套光学成像系统MTF测试结果(包括子午、弧矢两个方向)

    Figure  13.   MTF test results of the second and third optical imaging systems (including meridian and sagittal directions)

    图  14   光学成像系统星点像测试结果

    Figure  14.   Star point image test results of optical imaging system

    图  15   光学成像系统分辨力测试结果

    Figure  15.   Resolution test results of optical imaging system

    表  1   13种函数评价结果

    Table  1   Evaluation results of thirteen functions

    评价结果3>2>12>3>13>1>21>2>3
    评价函数统计7种函数4种函数1种函数1种函数
    下载: 导出CSV

    表  2   基于相似区域检测13种函数评价结果

    Table  2   Evaluation results of thirteen functions based on similar region detection

    评价结果3>2>13>1>22>3>12>1>31>2>31>3>2
    评价函数统计12种函数1种函数
    下载: 导出CSV

    表  3   MTF与星点、目视分辨率、波像差等检测方法之间的特点对比

    Table  3   Comparison of features between MTF and star point, visual resolution, wave aberration and other test methods

    像质检测方法特点与MTF检测法对比
    星点法 空间域目标信息描述,可进行衍射限系统所成星点像光强分布与实际系统星点像光强分布比较;难以定量测量,对轴上球差不灵敏[15];直观,简便。 频率域目标信息描述,可定量测量,通过比较实测值与理论值差异可鉴别不同像差影响[11]
    目视分辨率法 反映截止频率附近的像质情况,直观,简便,可定量;难以获得低频信息,受测试者主观因素影响大[15] 低频信息到高频信息的连续反映,不受主观因素影响;测量相对复杂。
    波像差法 单色光测量,表征图像清晰度不直观,测量精度高,可反映装调的微小误差及镜面变形,反映不同像差,求解装调问题[16] 复色光测量,客观、灵敏、定量的像质评价手段。
    下载: 导出CSV
  • [1] 李永昆, 林招荣, 张绪国. 国外远距斜视航空相机发展概况[J]. 航天返回与遥感,2017,38(6):11-18. doi: 10.3969/j.issn.1009-8518.2017.06.002

    LI Yongkun, LIN Zhaorong, ZHANG Xuguo. Development survey of foreign aerial cameras for distant oblique reconnaissance[J]. Spacecraft Recovery & Remote Sensing,2017,38(6):11-18. doi: 10.3969/j.issn.1009-8518.2017.06.002

    [2] 程志峰, 刘福贺, 荀显超. 双波段共口径成像系统光机设计与分析[J]. 红外与激光工程,2015,44(11):3366-3372. doi: 10.3969/j.issn.1007-2276.2015.11.034

    CHENG Zhifeng, LIU Fuhe, XUN Xianchao. Opto-mechanical design and analysis of dual-band sharing aperture imaging system[J]. Infrared and Laser Engineering,2015,44(11):3366-3372. doi: 10.3969/j.issn.1007-2276.2015.11.034

    [3] 朱海滨, 邵毓, 张远健, 等. 可见光/红外双视场全景式航空侦查相机光学系统设计[J]. 应用光学,2017,38(1):7-11.

    ZHU Haibin, SHAO Yu, ZHANG Yuanjian, et al. Optical system design of visible/infrared and double-FOV panoramic aerial camera[J]. Journal of Applied Optics,2017,38(1):7-11.

    [4]

    LEE J H, JUNG Y S, RYOO S Y, et al. Imaging performance analysis of an EO/IR dual band airborne camera[J]. Journal of the Optical Society of Korea,2011,15(2):174-181. doi: 10.3807/JOSK.2011.15.2.174

    [5]

    IYENGAR M. The Goodrich 3rd generation DB-110 system: operational on tactical and unmanned aircraft[J]. Health Care Management Review,2006,620909:1-14.

    [6]

    WYATT S H. Dual spectral band reconnaissance systems for multiple platforms[J]. SPIE,2002,4824:36-46.

    [7] 时红伟, 陈世平. 一种面向用户任务需求的遥感图像质量标准-NIIRS[J]. 航天返回与遥感,2003,24(3):34-39.

    SHI Hongwei, CHEN Shiping. A remote sensing image quality standard orienting to user’s mission requirements -NIIRS[J]. Spacecraft Recovery & Remote Sensing,2003,24(3):34-39.

    [8] MICHAEL L J, JAMES H, DANIEL V, el al. 光电系统 设计、分析和测试[M]. 杨应槐, 译. 北京: 航天工业总公司第三研究院8358所, 2001: 124-144.

    MICHAEL L J, JAMES H, DANIEL V, el al. Electro-optical system design, analysis and testing[M]. Translated by YANG Yinghuai. Beijing: 8358 Institute of the Third Research Institute of Aerospace Industry Corporation, 2001: 124-144.

    [9]

    HOLST G C, KRAPELS K A, OLSON C, et al. Model development and system performance optimization for staring infrared search and track (IRST) sensors[J]. International Society for Optics and Photonics,2016,9820:98200B.

    [10] 王惠林, 宁飞, 冯涛. 基于TTP准则的光电侦察设备作用距离评估[J]. 应用光学,2019,40(增刊):1-7.

    WANG Huilin, NING Fei, FENG Tao. Evaluation of operational distance of photoelectric detection equipment based on TTP criterion[J]. Journal of Applied Optics,2019,40(Sup):1-7.

    [11]

    WILLIAMS C S, BECKLUND O A. Introduction to the optical transfer function[M]. US: SPIE Press, 2002.

    [12] HOLST G C. 光电成像系统性能[M]. 阎吉祥, 俞信, 解天宝, 等, 译. 4版. 北京: 国防工业出版社, 2015: 136-141.

    HOLST G C. Electro-optical imaging system performance[M]. Translated by YAN Jixiang, YU Xin, XIE Tianbao, et al. 4th ed. Beijing: National Defense Industry Press, 2015: 136-141.

    [13] 陈亮, 李卫军, 谌琛, 等. 数字图像清晰度评价函数的通用评价能力研究[J]. 计算机工程与应用,2013,49(14):152-155. doi: 10.3778/j.issn.1002-8331.1202-0442

    CHEN Liang, LI Weijun, CHEN Chen, et al. Efficiency contrast of digital image definition functions for general evaluation[J]. Computer Engineering and Applications,2013,49(14):152-155. doi: 10.3778/j.issn.1002-8331.1202-0442

    [14]

    GUELER R, OLSON C, SPARKS A. In-flight optical performance measurement of high-resolution airborne imagery[C]//Infrared Imaging Systems: Design, Analysis, Modeling, and Testing XXVIII. US: International Society for Optics and Photonics, 2017: 1017806.

    [15] 苏大图. 光学测量与象质鉴定[M]. 北京: 北京工业学院出版社, 1988: 374-375.

    SU Datu. Optical measurement and image quality identification[M]. Beijing: Beijing Institute of Technology Press, 1988: 374-375.

    [16] 韩昌元. 光学系统成像质量评价及测试[M]. 长春: 中国科学院长春精密机械与物理研究所, 2013: 26-43.

    HAN Changyuan. Optical system image quality evaluation and test[M]. Changchun: Changchun Institute of Optics, Fine Mechanics and Physics, Chinese Academy of Science, 2013: 26-43.

    [17] 韩昌元. 光电成像系统的性能优化[J]. 光学精密工程,2015,23(1):1-9.

    HAN Changyuan. Performance optimization of electro-optical imaging systems[J]. Optics and Precision Engineering,2015,23(1):1-9.

    [18] 李晓彤, 岑兆丰. 几何光学·像差·光学设计[M]. 杭州: 浙江大学出版社, 2014.

    LI Xiaotong, CEN Zhaofeng. Geometrical optics, aberrations and Optical Design[M]. Hangzhou: Zhejiang University Press, 2014.

    [19]

    HOLST G C. Electro-optical imaging system performance[M]. 5th ed. Washington DC: JCD Publishing, 2008: 84-86.

    [20]

    SHANNON R R. A useful optical engineering approximation[J]. Optics & Photonics News,1994,5(4):34.

  • 期刊类型引用(3)

    1. 刘飞,太智超,张敏洁,相萌,于纯,邵晓鹏. 基于天塞主镜的多尺度长焦成像系统设计. 航空兵器. 2024(01): 111-116 . 百度学术
    2. 刘飞,吴晓琴,赵琳,段景博,李江勇,邵晓鹏. 广域高分辨率计算光学成像系统研究进展. 激光与光电子学进展. 2021(18): 10-35+438+3 . 百度学术
    3. 郭智元,李建聪,陈太喜,伍雁雄. 单中心超广角手机镜头设计. 激光与光电子学进展. 2020(07): 277-283 . 百度学术

    其他类型引用(6)

图(16)  /  表(3)
计量
  • 文章访问数:  961
  • HTML全文浏览量:  367
  • PDF下载量:  163
  • 被引次数: 9
出版历程
  • 收稿日期:  2021-03-16
  • 修回日期:  2021-04-07
  • 网络出版日期:  2021-07-29
  • 刊出日期:  2021-09-15

目录

/

返回文章
返回