-
车载红外辅助驾驶系统的应用场景主要是夜间或恶劣天气环境,特别是应用于战场灯火管制时,人眼观察范围极其有限,安全风险指数高,辅助驾驶过程中需保持足够的行车视距,以确保前方遇到障碍物或突发情况时车辆能够迅速制动。行驶车辆的制动过程一般可分为人员反应、制动延时和制动器作用三个阶段,即:
$$S = {S_1} + {S_2} + {S_3}$$ (1) 式中:
$S$ 为制动距离;${S_1}$ 、${S_2}$ 和${S_3}$ 分别为人员反应、制动延时和制动器作用过程中车辆行驶的距离。车载红外辅助驾驶系统一般由摄像头和显示器组成,安装在车外的摄像头拍摄路况图像,传输至驾驶室内的显示器供驾驶员观察,在此过程中会存在视频图像的延迟。另外,由于红外成像系统存在着非均匀性的问题[13-14],每隔一定时间需进行一次非均匀校正,如果非均匀校正发生于车辆制动阶段,会延长制动过程。因此,车载红外辅助驾驶的整个制动过程如图1所示,可分为图像延迟、非均匀自动校正、人员反应、制动延时和制动器作用五个阶段。
如果制动器作用前车速为
${V_0}$ ,制动器起作用后车辆减速为$a = {\varphi _s}g$ ,其中$g$ 表示重力加速度,${\varphi _s}$ 表示滑动附着系数。则车载红外辅助驾驶制动距离可表示为:$$\begin{split} {S'} =\; & {S_1} + {S_2} + {S_3} + {S_4} + {S_5}=\\ & {V_0}{t_1} + {V_0}{t_2} + \frac{{{{\left( {{V_0}/3.6} \right)}^2}}}{{2{\varphi _s}g}} + {V_0}{t_4} + {V_0}{t_5} \end{split} $$ (2) 式中:
${S_4}$ 、${S_5}$ 分别表示图像延迟和非均匀自动校正过程中车辆行驶的距离。假设车载红外辅助驾驶系统的探测距离为$R$ ,为保证行车安全,则有:$${V_0}{t_1} + {V_0}{t_2} + \frac{{{{\left( {{V_0}/3.6} \right)}^2}}}{{2{\varphi _s}g}} + {V_0}{t_4} + {V_0}{t_5} + d \leqslant R$$ (3) 式中:
$d$ 为车辆制动结束后与前方障碍物或人员、车辆等所需保持的安全距离。同时,车载红外辅助驾驶系统观察到前方路况信息,需满足红外探测系统实现目标探测的基本条件:(1)对于空间频率为f的目标,它与背景的实际等效温差在经过大气衰减到达红外探测系统时,不小于系统对应的最小可分辨温差MRTD;(2)观察目标对红外探测系统的张角应不小于观察等级所要求的最小视角。即:
$$\left\{ \begin{aligned} & \Delta {T_{\rm e}} \cdot {\tau _{\rm a}}(R) \geqslant MRTD(f) \\ & \frac{H}{{2{n_{\rm e}}R}} \geqslant \Delta \theta \end{aligned} \right.$$ (4) 式中:
$\Delta {T_{\rm e}}$ 为目标与背景的实际等效温差;${\tau _{\rm a}}(R)$ 为大气透过率;$H$ 为目标高度;${n_{\rm e}}$ 为观察等级要求的目标等效条带对数。车载红外辅助驾驶过程中,车载红外辅助驾驶系统与路面目标处于相向运动的状态,因此,在上述红外静态性能模型基础上,进一步引入动态性能模型,其中,被广为接受的红外动态性能模型是CNVEO模型。假设探测过程中车辆为匀速运动,在时段
$t$ 内的动态探测概率${p_2}$ 为:$${p_2}(t) = {p_1}\left[ {1 - \exp \left( - \frac{t}{{{T_{\rm eye}}}}\right)} \right]$$ (5) 式中:
${p_1}$ 为静态探测概率;${T_{eye}}$ 为人眼的积分时间。结合动态探测过程,则车载红外辅助驾驶的安全行车视距模型可表示为:
$$\left\{ \begin{aligned} & \left\{ \begin{aligned} &\Delta {T_{\rm e}} \cdot {\tau _{\rm a}}(R) \geqslant MRTD(f) \\ & \frac{H}{{2{n_{\rm e}}R}} \geqslant \Delta \theta \end{aligned} \right. \\ & {p_2}(t) = {p_1}\left[ {1 - \exp ( - \frac{t}{{{T_{\rm eye}}}})} \right] \\ & {V_0}t + {V_0}{t_1} + {V_0}{t_2} + \frac{{{{\left( {{V_0}/3.6} \right)}^2}}}{{2{\varphi _{\rm s}}g}} + {V_0}{t_4} + {V_0}{t_5} + d \leqslant R \end{aligned} \right.$$ (6) -
从安全行车视距模型的建立过程可以看出,车载红外辅助驾驶系统的安全车速与路面条件和探测距离有直接关系,最大安全车速
${V_{\max }}$ 满足$${V_{\max }}(t + {t_1} + {t_2} + {t_4} + {t_5}) + \frac{{{{\left( {{V_{\max }}/3.6} \right)}^2}}}{{2{\varphi _{\rm s}}g}} + d = R$$ (7) 式中:滑动附着系数
${\varphi _{\rm s}}$ 与路面条件直接相关[15],常见路面土路和混凝土路的滑动附着系数如表1所示。表 1 常见路面类型的滑动附着系数
Table 1. Sliding adhesion coefficient of common pavement type
Pavement type Dry concrete road Wet concrete road Dry dirt road Wet dirt road Muddy dirt road Sliding adhesion coefficient 0.75 0.35 0.65 0.20 0.15 路况一定时,辅助驾驶的最大安全车速主要取决于动态探测概率和红外探测器的探测距离。干燥土路面和干燥混凝土路面条件下,取动态探测概率
${p_2} = 99\% $ ,探测距离对最大安全车速的影响如图2所示。可以明显看出二者的正相关关系,当探测距离分别大于190 m左右、160 m左右时,最大安全车速达到了120 km/h。为了进一步分析环境条件对最大安全车速的影响,需对探测距离
$R$ 进行求解,求解之前首先对$MRTD(f)$ 进行修正。$MRTD(f)$ 的大小一般来自于实验室测试或理论计算,通过车载红外辅助驾驶系统实际观察目标时,由于不满足实验室标准条件和理论计算理想条件,可对一些因子进行修正。以噪声等效温差
$NETD$ 为基础,考虑热成像系统全部电路的带宽及人眼作用,$MRTD(f)$ 可表示为:$$MRTD\left( f \right) = \frac{{{{\text{π}} ^2} \cdot SN{R_{\rm DT}}}}{{4\sqrt {14} }}\left[ {\frac{{NETD \cdot f}}{{MT{F_{\rm S}}\left( f \right)}}} \right] \cdot {\left[ {\frac{{\alpha \beta }}{{{\tau _{\rm d}}{T_{\rm eye}}{f_{\rm P}}\Delta {f_{ n}}}}} \right]^{{1 / 2}}}$$ (8) 式中:
$SN{R_{\rm DT}}$ 为阈值信噪比;$MT{F_{\rm S}}\left( f \right)$ 为热成像系统总的调制传递函数;$\alpha $ 、$\beta $ 分别为探测器横向和纵向的角分辨率;${\tau _{\rm d}}$ 为探测器的积分时间;${f_{\rm P}}$ 为帧频;$\Delta {f_{ n}}$ 为放大电路等效噪声带宽。实验室MRTD测试采用的是长宽比为7:1的四条带标准靶,辅助驾驶过程中路面目标的实际高宽比不一定满足理想条件,因此,需要进行目标形状的修正。目标形状修正因子为
${k_1} = \sqrt {7/\varepsilon } $ ,其中,$\varepsilon $ 表示目标等效高宽比,与实际高宽比${\varepsilon _0}$ 的关系可表示为:$$\varepsilon = \left\{ {\begin{array}{*{20}{c}} {2{n_{\rm e}}{\varepsilon _0}}&{x{\text{方向}}}\\ {2{n_{\rm e}}/{\varepsilon _0}}&{y{\text{方向}}} \end{array}} \right.$$ (9) 同时,实验室
$MRTD$ 测试采用的是恒定温度为${T_{\rm T}}$ 的黑体目标背景,辅助驾驶过程中需根据实际路面温度${T_{\rm m}}$ 进行修正,修正因子为${k_2} = {T_{\rm T}}/{T_{\rm m}}$ 。车载红外辅助驾驶系统对路面目标的静态探测概率
${p_1}$ 与阈值信噪比$SNR$ 有关,其关系为:$${p_1} = \int_{ - \infty }^{SNR - SN{R_{\rm DT}}} {\exp ( - {z^2}){\rm d}z} $$ (10) 阈值信噪比修正因子为
${k_3} = SNR/SN{R_{\rm DT}}$ 。修正后的
$MRTD(f)$ 可表示为:$$\begin{split} MRTD'\left( f \right) =\; & {k_1} \cdot {k_2} \cdot {k_3}\frac{{{\text{π} ^2} \cdot SN{R_{\rm DT}}}}{{4\sqrt {14} }}\cdot \\ & \left[ {\frac{{NETD \cdot f}}{{MT{F_{\rm S}}\left( f \right)}}} \right] \cdot {\left[ {\frac{{\alpha \beta }}{{{\tau _{\rm d}}{T_{\rm eye}}{f_{\rm P}}\Delta {f_{\rm n}}}}} \right]^{{1 / 2}}} \end{split} $$ (11) 则有:
$$\left\{ \begin{aligned} & \left\{ \begin{aligned} & \Delta {T_{\rm e}} \cdot {\tau _{\rm a}}(R) \geqslant MRTD'(f) \\ & \frac{H}{{2{n_{\rm e}}R}} \geqslant \Delta \theta = \frac{1}{{2f}} \end{aligned} \right. \\ & {p_2}(t) = {p_1}\left[ {1 - \exp ( - \frac{t}{{{T_{\rm eye}}}})} \right] \\ & {V_{\max }}(t + {t_1} + {t_2} + {t_4} + {t_5}) + \frac{{{{\left( {{V_{\max }}/3.6} \right)}^2}}}{{2g{\varphi _{\rm s}}}} + d = R \end{aligned} \right.$$ (12) 可以看出,最大安全车速
${V_{\max }}$ 的影响因素主要包括探测概率${p_1}$ 和${p_2}$ 、目标尺寸、目标与背景等效温差、大气透过率、目标高度、目标等效条带对数。辅助驾驶过程中,为确保行车安全,可取静态探测概率${p_1} = 100\% $ 。目前,车载红外辅助驾驶系统一般采用8~14 μm波段探测器,当探测距离为300 m时,通过LOWTRAN计算不同能见度下的大气透过率,结果如图3所示。可以看出,由于车载红外辅助驾驶系统为近距离探测,天气条件较好时能见度对大气透过率的影响不明显。
可见观察等级和目标一定时,良好天气下的最大安全车速主要与目标背景温差有关。图4为干燥土路面和干燥混凝土路面下,观察等级分别为发现和识别时,最大安全车速与目标背景温差的变化关系,仿真计算过程中基本参数值如表2所示。从图中可以看出,随着温差的增大最大安全车速也明显增大,且观察等级为发现时的最大安全车速远大于识别时。辅助驾驶过程中,为保证行车安全应以识别条件下的车速控制为主,当路况条件较好时可选择发现条件下的车速控制。
表 2 仿真计算基本参数值
Table 2. Basic parameter value of simulation calculation
SNRDT ${\tau _{\rm{d}}}$ Teye fP NETD H p1 p2 2.8 30 µs 0.1 s 50 Hz 40 20 cm 1 0.99 -
恶劣天气条件对车载红外辅助性能的影响,主要来自于两方面,一是容易造成路面的潮湿和积水,对行车制动性能造成严重影响;二是大气对红外辐射信号衰减严重,导致探测器探测距离的下降。恶劣天气下,大气对红外辐射的衰减主要由于大气吸收、大气散射和雾、雨等恶劣天气条件引起的衰减。三种衰减因素影响下的光谱透过率
$\tau (\lambda )$ 与衰减系数$\mu (\lambda )$ 均满足波盖尔-朗伯定律,即:$$\tau (\lambda ) = {\varphi _e}(\lambda ,R)/{\varphi _e}(\lambda ,0) = \exp ( - R \cdot \mu (\lambda ))$$ (13) 式中:
${\varphi _e}(\lambda ,R)$ 为距离$R$ 处,目标背景辐射能量的光谱密度。吸收、散射和气象衰减共同影响下的大气光谱透过率即为三种大气透过率的乘积。由于车载红外辅助驾驶系统属于近距离探测,红外辐射信号传输路径相对较短,大气吸收和散射对辐射信号传输的影响相对较小,大气消光作用主要来自于恶劣天气条件引起的衰减,造成大气透过率的下降。对大气透过率的计算,目前,大多数研究主要借助于经验公式或专门的仿真软件。由于大气影响因素比较复杂,通过经验公式计算时容易产生较大的误差,因此,文中采用较为成熟的LOWTRAN大气仿真软件,对雾、雨天气条件下的大气透过率进行仿真计算。
-
雾是在高湿度条件下由小水滴或冰晶形成的水汽凝结物,红外辐射在雾中传播时,衰减系数主要取决于雾粒子浓度的大小,而雾粒子浓度的变化可通过能见度来表征。8~14 μm波段,不同能见度条件下雾天大气透过率的仿真结果如图5所示(LOWTRAN参数设置为:西安七月平均大气模式,辐射雾消光系数,海拔高度350 m)。从图中可以看出,当能见度由3 km到50 m变化时,大气透过率明显减小,特别是能见度降至50 m时,大气透过率已经接近于0;对比图3可以发现,当能见度为3 km时,雾对大气透过率的影响已经相对不明显。
将8~14 μm波段的大气透过率均值代入公式(12)进行仿真计算,目标背景温差设置为5 K,其他参数设置见表2。雾天能见度对探测距离和最大安全车速的影响,分别如图6和图7所示。从两张图中均可以看出,探测距离和最大安全车速随着能见度的增大均逐渐增大,且变化趋势在能见度小于1 km时,比较急速,在大于1 km时比较平缓,说明当能见度小于1 km时雾天对探测距离的影响加剧。因此辅助驾驶过程中,当能见度小于1 km时应以识别条件下的最大车速控制为主;能见度大于1 km时,可根据路况情况选择识别或发现条件下的最大车速。结合图7可以看出,能见度为3000 m时,土路、混凝土路两种路面下的最大车速分别达到33~61 、38~70 km/h,能见度为500 m时,分别降至21 、25 km/h。
-
雨天同样会对红外辐射信号形成衰减,从而影响车载红外辅助驾驶系统的探测距离。同时,雨天还会造成路面的泥泞和湿滑,对滑动附着系数有很大影响,导致车辆制动性能的下降。如图8所示,为雨天8~14 μm波段大气透过率的仿真结果(LOWTRAN仿真参数设置为:西安七月平均大气模式,乡村消光系数,海拔高度350 m)。图中显示了不同降雨量时的透过率曲线,可以看出从5~40 mm/h变化时,大气透过率明显减小。同时,还可以发现辐射波长从8~14 μm变化时,雨天的透过率曲线相对比较平缓,这是由于雨天粒子的尺寸要比雾滴的尺寸更大,其产生的衰减为非选择性衰减,对8~14 μm整个波段都有明显的衰减作用。
将8~14 μm波段的大气透过率均值代入公式(12)进行仿真计算。雨天降雨强度对探测距离和最大安全车速的影响,分别如图9和图10所示。从图9可以看出:随着降雨强度的增大,车载红外夜视系统对20 cm目标的探测距离逐渐减小,降雨强度为50 mm/h时发现距离、识别距离分别减小至36 和18 m。对于混凝土路和土路,雨天会导致混凝土路面的潮湿、土路面的潮湿或泥泞,路面滑动附着系数减小(如表1所示)。如图10所示,潮湿混凝土路、潮湿土路和泥泞土路三种路面下,随着降雨强度的增大,由于夜视系统探测距离和路面滑动附着系数的减小,辅助驾驶最大安全车速均迅速减小。考虑到雨天驾驶安全风险较大,辅助驾驶过程中应区分路面状况的同时以识别条件下的最大车速控制为主,降雨强度5 mm/h时,三种路面下的最大安全车速分别可达到27 、24 、22 km/h,降雨强度增大至50 mm/h时分别降至14 、13 、12 km/h。
Influences of weather conditions on vehicular infrared assistant driving performance
-
摘要: 综合分析车载红外辅助驾驶安全制动过程、红外探测静态性能模型和动态性能模型,建立了辅助驾驶安全行车视距模型;分析了辅助驾驶最大安全车速与路况环境、红外探测性能之间的关系,发现其主要与滑动附着系数和探测距离相关;通过红外探测距离的修正计算,对夜间最大安全车速进行了仿真分析,结果表明良好天气条件下其主要受目标背景温差的影响;以雾天和雨天为重点进行了实例分析,结果表明:雾天主要对探测距离形成影响,特别是能见度小于1 km时影响加剧,能见度500 m时最大安全车速可控制在21 ~25 km/h,雨天对探测距离和滑动附着系数均会形成影响,辅助驾驶应以红外识别条件下的最大安全车速控制为主,降雨强度50 mm/h时最大安全车速可控制在12 ~14 km/h。
-
关键词:
- 车载红外辅助驾驶系统 /
- 辅助驾驶性能 /
- 最大安全车速 /
- 探测距离 /
- 滑动附着系数
Abstract: Based on comprehensive analysis of vehicle infrared assisted driving safety braking process, infrared static detection model and dynamic detection model, the model of visual range for assistant driving safety was established. The relationship between maximum safe speed, road condition, infrared detection performance was analyzed. It is found that it is mainly related to sliding adhesion coefficient and detection distance. Through the correction calculation of infrared detection distance, the maximum safe speed at night was simulated. The results show that it is mainly affected by the temperature difference between target and background. Emphasis is laid on foggy and rainy weather for example analysis. The results show that foggy weather mainly affects the detection distance, especially when the visibility is less than 1 km, and the maximum safe speed need be controlled at 21-25 km/h when the visibility is 5 km. Rainy weather will affect the sliding adhesion coefficient and detection distance. The maximum safe speed control under infrared recognition is the main method for assistant driving. When rainfall intensity is 50 mm/h, the maximum safe speed need be controlled at 12-14 km/h. -
表 1 常见路面类型的滑动附着系数
Table 1. Sliding adhesion coefficient of common pavement type
Pavement type Dry concrete road Wet concrete road Dry dirt road Wet dirt road Muddy dirt road Sliding adhesion coefficient 0.75 0.35 0.65 0.20 0.15 表 2 仿真计算基本参数值
Table 2. Basic parameter value of simulation calculation
SNRDT ${\tau _{\rm{d}}}$ Teye fP NETD H p1 p2 2.8 30 µs 0.1 s 50 Hz 40 20 cm 1 0.99 -
[1] Brown T, He Y, Roe C, et al. Is more better?-night vision enhancement system’s pedestrian warning modes and older drivers [J]. Annals of Advances in Automotive Medicine, 2010, 54(54): 343−350. [2] Gade R, Moeslund T B. Thermal cameras and applications: a survey [J]. Machine Vision and Applications, 2014, 25(1): 245−262. doi: 10.1007/s00138-013-0570-5 [3] 刘秋锦. 车用红外夜视系统研究[D]. 秦皇岛: 燕山大学, 2014. Liu Qiujin. Research of vehicular infrared night vision system[D]. Qinhuangdao: Yanshan University, 2014. (in Chinese) [4] 吴传福. 车载红外热成像系统的研究与设计[D]. 成都: 电子科技大学, 2015. Wu Chuanfu. Research and design of vehicle infrared thermal imaging system[D]. Chengdu: University of Electronic Science and Technology of China, 2015. (in Chinese) [5] 边二涛. 基于红外热成像的车载夜视系统[D]. 广州: 华南理工大学, 2015. Bian Ertao. Automotive night-vision system based on infrared thermal imaging[D]. Guangzhou : South China University of Technology, 2015. (in Chinese) [6] Brehar R, Vancea C, Nedevschi S. Pedestrian detection in infrared images using aggregated channel features[C]//IEEE International Conference on Intelligent Computer Communication an Processing, 2014: 127-132. [7] Hwang S, Park J, Kim N, et al. Muilispectral pedestrain detection: Benchmark dataset and baseline[C]//Computer Vision and Pattern Recognition, 2015: 1037-1045. [8] 王国华, 刘琼, 庄家俊. 基于局部特征的车载红外行人检测方法研究[J]. 电子学报, 2015, 43(7): 1444−1448. doi: 10.3969/j.issn.0372-2112.2015.07.030 Wang Guohua, Liu Qiong, Zhuang Jiajun. Method research on vehicular infrared pedestrian detection based on local features [J]. Acta Electronica Sinica, 2015, 43(7): 1444−1448. (in Chinese) doi: 10.3969/j.issn.0372-2112.2015.07.030 [9] Lu Yueshen, Michael J H, William R L, et al. Imaging system for vehicle [J]. US Patent App, 2018, 16(10): 581. [10] Michelle A G, Marco J F. Pedestrian detection at night based on faster R-CNN and far infrared images[C]//Intelligent Robotics and Applications, 2018: 335-345. [11] 沈振一, 孙韶媛, 赵海涛. 基于PP-MRF模型的单目车载红外图像三维重建[J]. 东华大学学报, 2015, 41(3): 341−347. Shen Zhenyi, Sun Shaoyuan, Zhao Haitao. Three-dimensional reconstruction from monocular vehicular infrared images based on PP-MRF model [J]. Journal of Donghua University, 2015, 41(3): 341−347. (in Chinese) [12] 范德营, 蒋先刚, 丘赟立, 等. 车载红外视频图像快速彩色化技术研究[J]. 华东交通大学学报, 2013, 30(2): 71−76. doi: 10.3969/j.issn.1005-0523.2013.02.015 Fan Deying, Jiang Xiangang, Qiu Yunli, et al. Fast colorization technology of vehicle-mounnted infrared video images [J]. Journal of East China Jiaotong University, 2013, 30(2): 71−76. (in Chinese) doi: 10.3969/j.issn.1005-0523.2013.02.015 [13] 王明昌, 樊养余, 陈宝国, 等. 基于SOPC的红外图像自适应非均匀性校正设计[J]. 红外与激光工程, 2017, 46(6): 0628001. doi: 10.3788/IRLA201746.0628001 Wang Mingchang, Fan Yangyu, Chen Baoguo, et al. Realization of adaptive non-uniformity correction of infrared image based on SOPC [J]. Infrared and Laser Engineering, 2017, 46(6): 0628001. (in Chinese) doi: 10.3788/IRLA201746.0628001 [14] 崔坤, 陈凡胜, 苏晓锋, 等. 自适应积分时间改变的红外焦平面非均匀校正方法[J]. 红外与激光工程, 2017, 46(11): 1104001. doi: 10.3788/IRLA201746.1104001 Cui Kun, Chen Fansheng, Su Xiaofeng, et al. Adaptive non-uniformity correction method for IRFPA with integration time changing [J]. Infrared and Laser Engineering, 2017, 46(11): 1104001. (in Chinese) doi: 10.3788/IRLA201746.1104001 [15] Khaleghian S, Emami A,Taheri S, et al. A technical survey on tire-road friction estimation [J]. Friction, 2017, 5(2): 123−146. doi: 10.1007/s40544-017-0151-0