en
×

分享给微信好友或者朋友圈

使用微信“扫一扫”功能。
作者简介:

王勇达,男,硕士生,主要研究方向为图像处理、机器视觉以及深度学习算法.2531337505@qq.com;

王硕禾,男,博士,教授,主要研究方向为数字图像处理、机器视觉以及计算机测控.wangshuohe@sina.com

通讯作者:

王硕禾,男,博士,教授,主要研究方向为数字图像处理、机器视觉以及计算机测控.wangshuohe@sina.com

中图分类号:TP391.4

文献标识码:A

DOI:10.13878/j.cnki.jnuist.20230424004

参考文献 1
陆娅楠.我国高铁运营里程超4万公里:铁路运营总里程超15万公里[N].人民日报,2021-12-31(1)
参考文献 2
铁路专家解答如何守好高铁的“安全红线”[J].城市轨道交通研究,2021,24(5):191
参考文献 3
刘国福.对我国发展高速电气化铁路接触网的思考和探讨[J].铁道工程学报,2003,20(1):122-125.LIU Guofu.Pondering and exploring on developing the OCS of high-speed electrification railway[J].Journal of Railway Engineering Society,2003,20(1):122-125
参考文献 4
赵文钰.高速铁路周界入侵多尺度目标检测算法研究[D].北京:北京交通大学,2022.ZHAO Wenyu.Research on multi-scale target detection algorithm for high-speed railway perimeter intrusion[D].Beijing:Beijing Jiaotong University,2022
参考文献 5
Niu H X,Hou T.Fast detection study of foreign object intrusion on railway track[J].Archives of Transport,2018,47(3):79-89
参考文献 6
陈永,卢晨涛,王镇.基于轻量级网络的铁路感兴趣区域异物侵限检测[J].吉林大学学报(工学版),2022,52(10):2405-2418.CHEN Yong,LU Chentao,WANG Zhen.Detection of foreign object intrusion in railway region of interest based on lightweight network[J].Journal of Jilin University(Engineering and Technology Edition),2022,52(10):2405-2418
参考文献 7
王辉,吴雨杰,范自柱,等.基于深度学习的铁路限界快速检测算法[J].铁道科学与工程学报,2023,20(4):1223-1231.WANG Hui,WU Yujie,FAN Zizhu,et al.Fast detection algorithm of railway clearance based on deep learning[J].Journal of Railway Science and Engineering,2023,20(4):1223-1231
参考文献 8
李媛.基于深度学习的高速铁路异物侵限检测的研究[D].兰州:兰州交通大学,2022.LI Yuan.Research on foreign body penetration detection of high-speed railway based on deep learning[D].Lanzhou:Lanzhou Jiaotong University,2022
参考文献 9
刘力.基于深度学习的轨道侵限异物检测方法研究[D].兰州:兰州交通大学,2022.LIU Li.Research on detection method of railway intrusion obstacles based on deep learning[D].Lanzhou:Lanzhou Jiatong University,2022
参考文献 10
缪希仁,刘志颖,鄢齐晨.无人机输电线路智能巡检技术综述[J].福州大学学报(自然科学版),2020,48(2):198-209.MIAO Xiren,LIU Zhiying,YAN Qichen.Review on UAV intelligent technology for transmission line inspection[J].Journal of Fuzhou University(Natural Science Edition),2020,48(2):198-209
参考文献 11
Azad R,Asadi-Aghbolaghi M,Fathy M,et al.Attention Deeplabv3+:multi-level context attention mechanism for skin lesion segmentation[C]//European Conference on Computer Vision.Cham:Springer,2020:251-266
参考文献 12
矫健,张磊,李晶.基于空洞空间金字塔池化的雾天图像语义分割[J].计算机应用研究,2021,38(7):2200-2202.JIAO Jian,ZHANG Lei,LI Jing.Semantic segmentation of foggy images based on atrous spatial pyramid pooling[J].Application Research of Computers,2021,38(7):2200-2202
参考文献 13
毛志荣,都云程,肖诗斌,等.基于ECA-Net与多尺度结合的细粒度图像分类方法[J].计算机应用研究,2021,38(11):3484-3488.MAO Zhirong,DU Yuncheng,XIAO Shibin,et al.Fine-grained image classification method based on ECA-Net and multi-scale[J].Application Research of Computers,2021,38(11):3484-3488
参考文献 14
唐渔,何志琴,周宇辉,等.基于Se-ResNet50特征编码器的公共环境图像描述生成[J].计算机应用研究,2023,40(6):1864-1869.TANG Yu,HE Zhiqin,ZHOU Yuhui,et al.Public environment image caption generation based on Se-ResNet50 feature encoder[J].Computer Application Research,2023,40(6):1864-1869
参考文献 15
张永宏,袁永.基于小波包分解和形态学融合的地基云图边缘检测[J].南京信息工程大学学报(自然科学版),2011,3(2):150-153.ZHANG Yonghong,YUAN Yong.Ground nephogram edge detection based on the fusion technique between wavelet package transform and morphological method[J].Journal of Nanjing University of Information Science & Technology(Natural Science Edition),2011,3(2):150-153
参考文献 16
辛超,刘扬.基于概率霍夫变换的车道线识别算法[J].测绘通报,2019(增刊2):52-55.XIN Chao,LIU Yang.Research on lane recognition algorithm based on probability Hough transform[J].Bulletin of Surveying and Mapping,2019(sup2):52-55
参考文献 17
慕羡,刘明珠.分析摄影测量图像处理的高精度误差补偿法[J].电子测试,2021(17):114-115,90.MU Xian,LIU Mingzhu.A high precision error compensation method for photogrammetric image processing is analyzed[J].Electronic Test,2021(17):114-115,90
目录contents

    摘要

    针对目前电气化铁路沿线复杂背景下铁路安全区域划分均需采用实际固定标准件为参照物且区域划分范围小等问题,提出一种无需参照物的高速铁路安全区域划分算法.首先基于无人机所采集图像中的相关参数计算出相应的GSD(地面采样间距)参数,然后利用加入ECA-Net模块的DeepLabv3+模型对图像中的轨道进行精确分割.通过边缘检测、开运算、概率霍夫变换等一系列图像处理操作,提取出构成轨道的关键像素点,并运用最小二乘法进行轨道拟合,得出轨道数学表达式.最后,结合数学算法和GSD参数以及轨道数学表达式,完成安全区域的划分.实验结果表明,所提算法测量精度高达90%以上,无需选取固定参照物,适应性强、鲁棒性高,具有较高的实用性和可靠性.

    Abstract

    To address the problem that the railway safety zone division along the electrified railway with complex background needs to use actual fixed standard parts as reference and the division range is small,a smart safety zone division approach independent of reference objects is proposed.The GSD (Ground Sample Distance) parameters are calculated from relevant parameters in images collected by UAVs (Unmanned Aerial Vehicles),and the DeepLabv3+ model with ECA-Net module is used to accurately segment the railway in the image.Then,a series of image processing operations such as edge detection,opening operation,and probability Hough transform are used to extract the key pixel points that make up the railway,and the least squares algorithm is used to fit the railway and obtain its mathematical expression.Finally,mathematical models,GSD parameters,and the mathematical expression of the railway are combined to complete the safety zone division.Experimental results show that the proposed approach achieves measurement accuracy over 90%,doesn't need to select fixed reference objects,and has strong adaptability and high robustness.The high practicality and reliability of the proposed approach provides effective technical support for safety management along the electrified railway.

  • 0 引言

  • 随着我国高速铁路建设的快速发展,高速电气化铁路线路的长度日益增加[1].由于异物进入线路会导致突发事故的发生,因此对异物可能给列车安全行驶带来的影响进行判断变得尤为重要.在恶劣的气候条件下,各种轻飘物体,例如彩钢瓦、塑料薄膜、防尘网、大棚等,常常会出现在高速铁路周围[2].这些异物经常会由于大风等原因侵入高铁线路内,干扰接触网[3]的正常工作,对铁路行车造成不同程度的危害.铁路安全区域的划分通常由各个地方路局根据铁路周围环境的不同来设置限界,并且铁路异物入侵巡检的大部分工作主要集中在对铁轨及轨道附近区域的异物进行检测.然而,近年来造成铁路接触网供电安全事故的异物并非来自轨道附近,是在路侧更大范围内.但目前对于更大范围的存在潜在隐患的异物检测,缺乏必要的技术手段.为了保障铁路的安全运行,按照国铁集团的相关文件要求,有必要对铁路沿线500 m范围内的地膜、防尘网、彩钢瓦等危害物及时检测并处理,避免影响行车安全及保障接触网的正常工作.因此,精确划分铁路大面积安全区域的范围,有助于对铁路沿线的潜在安全风险进行预判,对高铁安全运行具有重要意义.

  • 目前,国内外众多学者提出了很多以铁路为背景的基于机器视觉的非接触式界限划分方法.赵文钰[4]为提高铁路异物入侵检测的效率,采取了简单划分路侧区域限界的方法,通过路侧安装的监控摄像头采集影像,再利用传统图像处理技术将路侧区域划分为铁路限界内区域和铁路限界外区域,对不同区域内的目标采取不同的检测流程.但固定的监控设备不能全面覆盖铁路沿线,布设与维护成本高,灵活性差.Niu等[5]采用改进的Canny方法和Hough变换算法来提取轨道边缘信息,并结合图像分割方法来划定铁路周边危险区域,以减少后续图像处理中的信息量.然而,由于铁轨周边的环境往往比较复杂,传统的图像处理方法在面对复杂背景时容易出现误判,从而影响区域划分的准确性.陈永等[6]采用透视变换和三次函数拟合的方法来检测铁轨线的位置,并根据检测结果扩展划分出危险区域和安全区域,从而得到铁路异物侵限区域.相比传统Hough算法,该方法能够检测弯曲的铁轨线.然而,在识别轨道线前,需要手动划定待识别区域,无法实现对铁路异物侵限区域的自动提取.王辉等[7]提出一种基于深度学习的铁路轨道限界快速检测算法,使用锚框逐网格定位代替了传统的逐像素定位方法,大幅减少了计算量并提高了检测速度.此外,该算法结合轨道是连续线的特征,能够快速智能定位识别铁路轨道坐标.最后,根据固定轨距作为界限划分基准,按比例拓宽已识别的轨道线,从而确定铁路异物入侵限界的范围.李媛[8]提出了一种基于轻量级网络MobileNet的改进全卷积网络,用于对高铁异物入侵限界区域进行分割,并完成了将高速铁路周界区域划分为安全区及危险区的任务.然而该方法直接依照路基边界训练限界,导致限界划定固定,无法改变限界的大小.这一限制可能会影响到该方法在实际应用中的适用性.刘力[9]将轨道线作为建立限界的主要参考,首先将语义分割网络Unet替代传统算法进行轨道检测,随后通过最小二乘法完成轨道线的数学建模,再根据限界标准的规定,完成限界模型的建立,大幅提高了界限划分的效率.上述界限分割方法都是基于列车上携带的摄像头拍摄的影像进行分割,由于视觉透视原理,该视角所采集的图像在远端感兴趣区域的像素占全图比例小,从而导致界限划分效果不均衡.

  • 目前路侧大范围的界限划分需求给传统图像采集视角带来了极大挑战.而无人机具有机动灵活的视角,可以无畸变地俯拍铁路沿线及周边区域,并且因其巡检简单方便、效率高、无盲区、范围大等优点,已经开始在铁路巡检领域得到广泛应用[10],因此,利用无人机拍摄的影像来划分铁路两侧大面积安全区域的范围可以弥补传统影像采集方式的不足.

  • 针对铁路安全区域的划分问题,现有研究大多关注铁路及附近数米的范围,无法覆盖远距离的隐患异物,同时划定范围模糊,难以确定实际划分距离.尽管目前无人机已经广泛应用于铁路巡检,但基于无人机视角的界限划分研究较少并且智能化程度低.另外,目前大多数铁路路侧界限划分算法需要参照物,受参照物背景影响较大,会出现误检情况,不适用于复杂环境的界限划分.由此,本文创新性地提出了针对无人机采集影像并基于Deeplabv3+无需参照物的地面采样间距(GSD)智能大范围界限划分算法,可以实现铁路两侧500 m范围内的安全区域划分,主要包括:

  • 1)利用相机传感器性能参数和传感器与目标物距离推导得出不依赖参照物的GSD参数,计算出图像中一个像素点在真实世界中的实际大小,从而不需要选取复杂背景中的任何特定物体作为参照物.这种方法的优点在于,可以使测量更加便利,同时也可以提高测量的鲁棒性.

  • 2)将ECA-Net注意力机制模块引入DeepLabv3+语义分割模型中,可以有效地提高对轨道的分割精度.这种方法的优势在于,ECA-Net注意力机制可以在不增加模型复杂度的情况下,增强模型对轨道区域的关注程度,提高模型的特征提取效率和感知能力,从而实现更准确的轨道分割.

  • 3)通过对提取出的轨道区域进行一系列图像处理操作,包括边缘检测、开运算以及概率霍夫变换等,可以有效地提取轨道上的像素点数.这些像素点可以利用最小二乘法来拟合出轨道线,从而实现对轨道的识别.

  • 本文方法通过将图像处理和数学算法相结合,实现了对轨道线的自动化提取和识别,具有高效、准确的特点.

  • 1 方法原理

  • 1.1 地面采样间距(GSD)的计算

  • 地面采样间距(Ground Sample Distance,GSD)表示数字影像中单个像元对应的地面尺寸.根据飞行实际高度H、摄像头倾斜角度β、变焦倍数X,结合本文推导公式可计算出飞行时刻相机所采集图像的地面采样间距.

  • 像元是相机芯片上的最小感光单元,每个像元对应图像上的一个像素,像元尺寸a的计算公式如下:

  • a= 传感器尺寸 有效像素 .
    (1)
  • 变焦相机焦距的计算公式为

  • f=fmin ×f1f1, min ,
    (2)
  • 其中,f为变焦相机焦距,f1为变焦相机等效焦距,fmin为变焦相机最小焦距,f1,min为变焦相机最小等效焦距.

  • 广角相机的焦距是定值,以广角相机的等效焦距为基准得变焦相机的变焦倍数X

  • X=f1f2
    (3)
  • 即以变焦倍数X表示的变焦相机焦距f

  • f=fmin×f2×Xf1,min,
    (4)
  • 其中,f2为广角相机等效焦距.

  • 无人机飞行实际高度为

  • H=H1-H2
    (5)
  • 其中,H为飞行实际高度,H1为飞行当前高度,H2为地面海拔高度.

  • 正射影像是一种具有正射投影性质的遥感影像.在无人机航拍时,摄像头垂直于地面,拍摄的影像可以通过正射投影方法将像素投射到地面上.然而,投射后的像素并非完全呈正方形.以传感器高度为标准的正射影像GSD为

  • GSDH=H×HSf×HI,
    (6)
  • 其中,HS为传感器高度,HI为图像高度.

  • 以传感器宽度为标准的正射影像GSD为

  • GSDW=W×Wsf×WI,
    (7)
  • 其中,WS为传感器宽度,WI为图像宽度.

  • 以传感器高度和宽度为标准的计算结果不同,一般选取其中的一种作为正射影像GSDOR即可:

  • GSDOR=minGSDW,GSDH GSDOR=maxGSDW,GSDH.
    (8)
  • 铁路安全区域的划分不需要非常高的精确度,且一般相机的像元实际尺寸单位为μm级,数量级较小,因此像元的长宽之间的误差可以忽略不计.为了方便操作,通常将像元的长和宽视为相等,从而得到地面采样间距.GSD的计算原理如图1所示.

  • 图1 GSD几何原理

  • Fig.1 Orthographic GSD geometric schematic

  • GSDOR=Haf
    (9)
  • 在无人机对电气化铁路沿线进行巡检时,为保证观测视野范围足够广、飞行安全具有保障、操作便利等,一般采用倾斜摄影的方式来进行巡检.倾斜影像GSDOI由正射影像GSDOR推导得出.

  • β=90-|δ|,
    (10)
  • 其中,β为摄像头倾斜角度,表示摄像头倾斜面和竖直面的夹角,δ为云台俯仰角度,转动范围为-120°~30°.

  • 摄像头倾斜角度可以用HL=cos β进行表示:

  • L=Hcosβ,
    (11)
  • 其中,L为倾斜距离.

  • 根据GSDOR换算得GSDOI公式为

  • GSDOI=Laf=Hafcosβ.
    (12)
  • 根据式(12),可以计算出每个像素点在现实世界中所代表的实际大小.

  • 1.2 DeepLabv3+模型

  • 由于电气化铁路周围环境复杂,轨道的识别往往受到很大的干扰,导致轨道识别算法的普适性较低、抗干扰能力差.这意味着在简单背景下可以识别轨道,但是在复杂背景下就无法准确识别.为此,本文采用改进的DeepLabv3+模型[11]来对所关注的感兴趣区域(ROI)进行智能划定,即对轨道区域进行划定.DeepLabv3+模型结构如图2所示.

  • DeepLabv3+模型是一种采用编码器-解码器结构实现对图像分割的深度学习模型.编码器模块利用Xception神经网络,从输入的电气化铁路图像中提取特征; 提取到的特征通过空间金字塔池化模块[12](Atrous Spatial Pyramid Pooling,ASPP)获取多个尺度的高层语义信息; 各特征信息在通道维度上进行拼接并通过1×1卷积降低通道数,然后将高层特征图输入到解码器进行处理.这样可以有效提高对轨道的识别准确性,特别是在复杂场景下的表现更为突出.

  • 解码器模块使用4倍上采样处理的多尺度高级特征与主干网络Xception提取出的低级特征进行融合.随后,利用3×3卷积和4倍上采样将结果恢复到原始图像尺寸,完成对电气化铁路目标的分割.相较于仅有编码器结构,编码器-解码器结构能够有效融合图像的低层信息和高层信息,从而避免上采样操作导致的目标像素丢失问题.这样,可以有效提高分割的精度和可靠性.

  • 1.3 改进DeepLabv3+模型

  • DeepLabv3+模型通过ASPP可以获得多尺度信息,但是简单的维度拼接无法获得丰富的上下文信息,这对于电气化铁路的提取存在不足.为了增强网络对轨道位置的感知能力,同时提高整体的分割精度,可以采用注意力机制ECA-Net[13]来改进模型.

  • 图2 DeepLabv3+网络结构

  • Fig.2 DeepLabv3+ network structure

  • ECA-Net是一种有效的通道注意力模块.该模块是在SE-Net[14]基础上进行改进的,同样是在特征通道上引入注意力机制结构,ECA-Net仅引入少量的参数就获得了明显的性能增益.如图3所示,ECA模块利用一个可以自适应变换卷积核大小的一维卷积替换了SE模块原有的全连接层.其前向传播过程为输入特征矩阵,经过平均池化(GAP)后产生特征矩阵(1×1×C),对特征矩阵通过一个一维卷积滑动进行学习输出特征矩阵(1×1×C),随后采用Sigmoid函数对一维特征矩阵进行非线性化.通道维度C与卷积核大小k之间的关系如下:

  • k=Y(C)=log2(C)γ+bγodd .
    (13)
  • 式(13)可基于ECA-Net嵌入模型不同深度的位置,根据通道维度C自适应选取不同大小的卷积核,以实现更好的特征融合效果.因卷积核大小一般取奇数,所以采用odd函数来实现取奇数操作.γb是调整系数,分别设置为2和1.

  • 改进后的DeepLabv3+网络可以快速、精准地从电气化铁路沿线的复杂背景图像中提取轨道特征.提取的特征经过ASPP,对输出的多尺度空间信息进行特征拼接.为了减少拼接后无关特征对识别精度的影响,先通过使用ECA-Net注意力机制提高卷积神经网络的注意力,再使用1×1大小的卷积增加其非线性能力.将1×1卷积后的多尺度高级特征与编码器提取的低级特征进行拼接,再利用3×3卷积和4倍上采样技术,恢复图像原图的分辨率.改进后的模型在轨道识别精度上得到了提高,有助于更精准地分割复杂场景下的轨道.改进后的网络结构如图4所示.改进的DeepLabv3+模型可以很好地提取轨道ROI区域,图5展示了其提取效果.

  • 图3 ECA-Net模块示意图

  • Fig.3 Diagram of the ECA-Net module

  • 1.4 轨道中心线的识别

  • ROI(Region of Interest)区域即为感兴趣区域,是通过改进的DeepLabv3+模型来进行获取的.将数据输入到改进的DeepLabv3+模型中,输出图像如图5所示.图5中白色线性区域表示使用模型提取的铁路轨道区域,将此区域定义为ROI区域.对ROI区域进行灰度化处理,利用Sobel算子提取出x方向和y方向的边缘信息并融合.为了进一步提高融合后的边缘提取图像的质量,采用形态学中的开运算进行处理[15].具体而言,采用3×3大小的结构元对图像进行腐蚀操作,以去除周围的噪声.接着,利用形态学中的膨胀操作对图像的边界进行扩张,以促进区域的连通.所得图像如图6所示.

  • 图4 DeepLabv3+模型改进

  • Fig.4 DeepLabv3+ model improvement

  • 图5 改进DeepLabv3+后图像

  • Fig.5 Improved DeepLabv3+ image

  • 对开运算后的图像进行概率霍夫变换[16],概率霍夫变换可以提高线检测的效率和准确性.与常规霍夫变换需要考虑所有点的情况不同,概率霍夫变换只需要从随机取样的一小部分点集合中获取足够的信息来进行直线检测,可以大幅减少计算量和检测时间.提取概率霍夫变换中所需要的点作为集合,并将集合中的所有点采用最小二乘法[17]进行线性拟合,拟合得出线性方程,如图7所示,其中横轴为标记图像的横坐标像素值,纵轴为标记图像的纵坐标像素值.将拟合得到的线性方程绘画到原图上,从而得到一条与轨道位置相同的直线,即为轨道的识别线,如图8所示.

  • 图6 边缘检测处理

  • Fig.6 Edge detection processing

  • 图7 最小二乘法线性拟合

  • Fig.7 Linear regression using least squares method

  • 图8 轨道的识别

  • Fig.8 Track identification

  • 电气化铁路的两轨道拟合后的直线分别为L1L2,如图9所示.对应的方程如式(14)所示,推导得轨道中心线方程如式(15)所示.

  • 图9 轨道直线几何图

  • Fig.9 Straight line geometry for railway track

  • L1:y1=k1x+b1,L2:y2=k2x+b2.
    (14)
  • yCenter_line =k1+k22x+b2+b1-b22.
    (15)
  • 选取图像上任意两横坐标值x1x2代入式(15),即可得到y1y2值,由此两点确定轨道中心线的位置.将轨道中心线在原图上绘画出来,即完成轨道中心线的识别,如图10中绿线所示.

  • 1.5 铁路安全区域划分

  • 根据不同地区铁路局对异物侵入安全区域的不同规范标准,来进行相应限界的智能划分.以铁路正线的轨道中心线为基准,向两侧分别扩展划定为安全区域.扩展距离L(单位:m)与地面采样间距(GSD)相比求得要向两侧扩展的像素数.轨道中心线上选择两点向一边同方向同距离进行平移相同的像素数量n,将平移后的两点进行连接即为平移后的异物限界,按此操作在轨道中心线上选择两个点,向中心线另一边进行平移得到另一边限界,两限界之间的区域即为安全区域,如图11所示.

  • 图10 轨道中心线识别

  • Fig.10 Track center line identification

  • 图11 铁路安全区域划分

  • Fig.11 Railway safety zone division

  • 2 试验分析与验证

  • 为进一步验证算法准确性、可行性,对影响铁路安全区域划分的主要因素进行分析,即GSD公式推导的数值偏差和算法对轨道识别的位置偏差.

  • 以H20T相机为例来计算其广角相机在不同飞行高度下的正射影像GSDOR、广角相机在不同飞行高度和不同倾斜角度下的倾斜影像GSDOI,并将计算的实际GSDAv与大疆DJI Pilot2自带的GSD计算器显示的GSDDD比对,验证GSD计算方法的准确性.推导公式如下:

  • a= 传感器尺寸 有效像素 =6.29mm×4.71mm4056×3040=1.55μm×1.55μm,
    (16)
  • f=4.5mm,
    (17)
  • GSDOR=Haf=1.55H4.5×10,
    (18)
  • β=90-|δ|,
    (19)
  • GSDOI=Hafcosβ=1.55H4.5×10cosβ.
    (20)
  • 式(18)为利用广角相机进行电气化铁路巡检时GSDOR的推导公式,只需记录实际高度H参数即可; 式(19)—(20)为GSDOI的推导公式,需记录实际高度H、云台俯仰角度β两个参数值.

  • 2.1 正射影像GSD数值偏差对比

  • 以H20T相机的广角相机为例,其相机焦距为4.5 mm的定值,通过设定不同的实际高度H,利用GSD推导公式计算出GSDOR的实际计算数值,并将GSDDD与GSDAv进行对比,结果如表1所示.

  • 表1 正射GSD计算方法验证

  • Table1 Verification of orthographic GSD calculation method

  • 由表1中DJI Pilot2的显示数值可知,GSD测量值为厘米级精度,GSDDD和GSDAv两者数值基本接近,即正射GSD计算方法满足实际应用需求.

  • 2.2 倾斜影像GSD数值偏差对比实验

  • 以H20T相机的广角相机为例,通过设定不同的实际高度H和不同云台俯仰角度β两者的数值,利用GSD推导公式计算出GSDOI的实际计算数值,再将GSDDD与倾斜影像GSDAv进行对比,结果如表2所示.

  • 表2 倾斜影像GSD计算方法验证

  • Table2 Verification of GSD calculation method for oblique image

  • 表2中GSDDD和GSDAv两者数值(厘米级)基本接近,即倾斜GSD计算方法满足实际应用需求.

  • 由表1、表2可得DJI pllot2自带的GSD计算器显示数值GSDDD与GSD计算方法推导的计算结果GSDAv误差较小,满足实际应用需求,因此可以采用本文方法进行GSD的计算.

  • 2.3 实验数据集及评价指标

  • 为了研究电气化铁路沿线的影像数据,本文采用无人机拍摄视频和图片的方式进行数据采集,并制作Rail数据集.该数据集包含1 990张影像数据,并通过Labelme软件进行标注.数据集按8∶1∶1的比例进行划分,分别用于训练、验证和测试,如表3所示.

  • 表3 Rail数据集划分

  • Table3 Rail dataset division

  • MIOU(Mean Intersection Over Union)、MPA(Mean Pixel Accuracy)是计算机视觉领域中常见的评价指标.MIOU为平均交并比,它通过计算每个类别的交集与并集的比值,再对所有类别的结果取平均得到分割模型的整体性能指标,可以评价图像分割模型的像素级别预测准确度.MPA为平均像素准确率,它计算模型对图像中所有像素的分类准确率的平均值,反映图像分割模型对每个像素分类的准确性.

  • MIOU=1Ni=1N Xiij=1N Xij+j=1N Xji-Xii,
    (21)
  • MPA=1Ni=1N XiiTi,
    (22)
  • 式中:Xii代表识别为i类、实际为i类目标的像素; Xij代表识别为j类、实际为i类目标的像素; Xji代表识别为i类、实际为j类目标的像素; N为包括背景在内的类别总数; Tii类目标像素的总数量.

  • 2.4 DeepLabv3+实验对比

  • 为了验证改进DeepLabv3+模型的性能优势,与UNet、PSPNet以及改进前DeepLabv3+模型进行对比实验,结果如表4所示.

  • 表4 对比实验

  • Table4 Comparison test results

  • 实验结果表明,改进后的DeepLabv3+模型相比于UNet、PSPNet以及改进前的DeepLabv3+模型,MIOU指标分别提升1.73、10.92、3.91个百分点,MPA分别提升5.38、6.19、4.17个百分点.此外,在检测速度方面,改进后的DeepLabv3+模型FPS分别比UNet和PSPNet提升了15和23帧/s,但相比于改进前的DeepLabv3+略有下降.即改进后的算法在分割精度方面有了明显提升,但检测速度略有下降.改进前后的分割效果对比如图12所示.

  • 图12 改进前后分割效果对比

  • Fig.12 Comparison of segmentation results before and after improvement

  • 2.5 轨距误差测量

  • 轨道识别的位置偏差与GSD的数值偏差直接影响实际安全区域划分的准确性.铁轨的标准尺寸为1 435 mm,因此以轨距误差测量为参考,测量其与实际铁轨轨距的误差大小,从而推导出安全区域划分存在的误差.

  • 电气化铁路的两轨道拟合后的直线如图9所示,设L1L2对应的方程分别为

  • L1:A1x+B1y+C1=0,L2:A2x+B2y+C2=0.
    (23)
  • 电气化铁路的两轨道平行,所以可设两条轨道分别拟合的直线斜率相等,即xy前面的系数相同,因此可设两条直线方程为

  • L1:Ax+By+C1=0,L2:Ax+By+C2=0.
    (24)
  • 设点Pab)在直线Ax+By+C1=0上,则Aa+Bb+C1=0,即:

  • Aa+Bb=-C1.
    (25)
  • 由点到直线距离公式得,点PAx+By+C2=0的距离为

  • d=Aa+Bb+C2A2+B2.
    (26)
  • 将式(25)代入式(26)得:

  • d=-C1+C2A2+B2=C1-C2A2+B2.
    (27)
  • 两条平行线之间的距离是从一条直线上任意一点到另一条直线的距离,即两轨道之间的距离可通过式(27)进行表示,即已知两条轨道的拟合直线方程可求出两条轨道之间所占像素点数量,轨道距离dOd计算公式如下:

  • dOd=d×GSDSi,
    (28)
  • 其中,d为两条轨道之间所占像素点的数量,GSDSi为所拍摄图片的地面采样距离.

  • 以H20T的变焦相机为例,通过控制无人机不同的飞行实际高度H、变焦倍数X、云台俯仰角度β来计算轨距的相对误差,结果如表5所示.

  • 根据表5可知,相对误差均在10%以内.同时,轨距测量误差受云台俯仰角度影响较大,最佳倾斜角度为50°~90°.此外,随着变焦倍数的增大,轨道识别效果提升,测量误差降低.需要指出的是,铁路安全区域的设定范围广泛,精度要求相对较低,因此10%以内的精度误差符合实际需求.综上所述,本文方法具有较高的实用性和可靠性,并为电气化铁路沿线安全管理提供了有效技术支持.

  • 表5 轨距误差测量

  • Table5 Track gauge error measurement

  • 3 结束语

  • 针对目前电气化铁路沿线复杂背景下铁路安全区域划分均需采用实际固定参照物且区域划分范围小的问题,提出一种无需参照物的智能区域划分算法,摆脱了传统方法需要实际固定参照物和区域划分范围小的限制; 结合GSD参数和轨道数学表达式,实现了安全区域的精准划分; 用ECA-Net模块和DeepLabv3+模型对图像中的轨道进行精确分割,提高了测量精度; 运用最小二乘法进行轨道拟合,提高了算法的鲁棒性.本方法具有测量精度高、无需选取固定参照物、适应性强、鲁棒性高等优点,为电气化铁路沿线安全管理提供了有效的技术支持.本方法可以进一步发展和应用于其他需要区域划分的领域,具有广泛的应用前景和推广价值.

  • 参考文献

    • [1] 陆娅楠.我国高铁运营里程超4万公里:铁路运营总里程超15万公里[N].人民日报,2021-12-31(1)

    • [2] 铁路专家解答如何守好高铁的“安全红线”[J].城市轨道交通研究,2021,24(5):191

    • [3] 刘国福.对我国发展高速电气化铁路接触网的思考和探讨[J].铁道工程学报,2003,20(1):122-125.LIU Guofu.Pondering and exploring on developing the OCS of high-speed electrification railway[J].Journal of Railway Engineering Society,2003,20(1):122-125

    • [4] 赵文钰.高速铁路周界入侵多尺度目标检测算法研究[D].北京:北京交通大学,2022.ZHAO Wenyu.Research on multi-scale target detection algorithm for high-speed railway perimeter intrusion[D].Beijing:Beijing Jiaotong University,2022

    • [5] Niu H X,Hou T.Fast detection study of foreign object intrusion on railway track[J].Archives of Transport,2018,47(3):79-89

    • [6] 陈永,卢晨涛,王镇.基于轻量级网络的铁路感兴趣区域异物侵限检测[J].吉林大学学报(工学版),2022,52(10):2405-2418.CHEN Yong,LU Chentao,WANG Zhen.Detection of foreign object intrusion in railway region of interest based on lightweight network[J].Journal of Jilin University(Engineering and Technology Edition),2022,52(10):2405-2418

    • [7] 王辉,吴雨杰,范自柱,等.基于深度学习的铁路限界快速检测算法[J].铁道科学与工程学报,2023,20(4):1223-1231.WANG Hui,WU Yujie,FAN Zizhu,et al.Fast detection algorithm of railway clearance based on deep learning[J].Journal of Railway Science and Engineering,2023,20(4):1223-1231

    • [8] 李媛.基于深度学习的高速铁路异物侵限检测的研究[D].兰州:兰州交通大学,2022.LI Yuan.Research on foreign body penetration detection of high-speed railway based on deep learning[D].Lanzhou:Lanzhou Jiaotong University,2022

    • [9] 刘力.基于深度学习的轨道侵限异物检测方法研究[D].兰州:兰州交通大学,2022.LIU Li.Research on detection method of railway intrusion obstacles based on deep learning[D].Lanzhou:Lanzhou Jiatong University,2022

    • [10] 缪希仁,刘志颖,鄢齐晨.无人机输电线路智能巡检技术综述[J].福州大学学报(自然科学版),2020,48(2):198-209.MIAO Xiren,LIU Zhiying,YAN Qichen.Review on UAV intelligent technology for transmission line inspection[J].Journal of Fuzhou University(Natural Science Edition),2020,48(2):198-209

    • [11] Azad R,Asadi-Aghbolaghi M,Fathy M,et al.Attention Deeplabv3+:multi-level context attention mechanism for skin lesion segmentation[C]//European Conference on Computer Vision.Cham:Springer,2020:251-266

    • [12] 矫健,张磊,李晶.基于空洞空间金字塔池化的雾天图像语义分割[J].计算机应用研究,2021,38(7):2200-2202.JIAO Jian,ZHANG Lei,LI Jing.Semantic segmentation of foggy images based on atrous spatial pyramid pooling[J].Application Research of Computers,2021,38(7):2200-2202

    • [13] 毛志荣,都云程,肖诗斌,等.基于ECA-Net与多尺度结合的细粒度图像分类方法[J].计算机应用研究,2021,38(11):3484-3488.MAO Zhirong,DU Yuncheng,XIAO Shibin,et al.Fine-grained image classification method based on ECA-Net and multi-scale[J].Application Research of Computers,2021,38(11):3484-3488

    • [14] 唐渔,何志琴,周宇辉,等.基于Se-ResNet50特征编码器的公共环境图像描述生成[J].计算机应用研究,2023,40(6):1864-1869.TANG Yu,HE Zhiqin,ZHOU Yuhui,et al.Public environment image caption generation based on Se-ResNet50 feature encoder[J].Computer Application Research,2023,40(6):1864-1869

    • [15] 张永宏,袁永.基于小波包分解和形态学融合的地基云图边缘检测[J].南京信息工程大学学报(自然科学版),2011,3(2):150-153.ZHANG Yonghong,YUAN Yong.Ground nephogram edge detection based on the fusion technique between wavelet package transform and morphological method[J].Journal of Nanjing University of Information Science & Technology(Natural Science Edition),2011,3(2):150-153

    • [16] 辛超,刘扬.基于概率霍夫变换的车道线识别算法[J].测绘通报,2019(增刊2):52-55.XIN Chao,LIU Yang.Research on lane recognition algorithm based on probability Hough transform[J].Bulletin of Surveying and Mapping,2019(sup2):52-55

    • [17] 慕羡,刘明珠.分析摄影测量图像处理的高精度误差补偿法[J].电子测试,2021(17):114-115,90.MU Xian,LIU Mingzhu.A high precision error compensation method for photogrammetric image processing is analyzed[J].Electronic Test,2021(17):114-115,90

  • 参考文献

    • [1] 陆娅楠.我国高铁运营里程超4万公里:铁路运营总里程超15万公里[N].人民日报,2021-12-31(1)

    • [2] 铁路专家解答如何守好高铁的“安全红线”[J].城市轨道交通研究,2021,24(5):191

    • [3] 刘国福.对我国发展高速电气化铁路接触网的思考和探讨[J].铁道工程学报,2003,20(1):122-125.LIU Guofu.Pondering and exploring on developing the OCS of high-speed electrification railway[J].Journal of Railway Engineering Society,2003,20(1):122-125

    • [4] 赵文钰.高速铁路周界入侵多尺度目标检测算法研究[D].北京:北京交通大学,2022.ZHAO Wenyu.Research on multi-scale target detection algorithm for high-speed railway perimeter intrusion[D].Beijing:Beijing Jiaotong University,2022

    • [5] Niu H X,Hou T.Fast detection study of foreign object intrusion on railway track[J].Archives of Transport,2018,47(3):79-89

    • [6] 陈永,卢晨涛,王镇.基于轻量级网络的铁路感兴趣区域异物侵限检测[J].吉林大学学报(工学版),2022,52(10):2405-2418.CHEN Yong,LU Chentao,WANG Zhen.Detection of foreign object intrusion in railway region of interest based on lightweight network[J].Journal of Jilin University(Engineering and Technology Edition),2022,52(10):2405-2418

    • [7] 王辉,吴雨杰,范自柱,等.基于深度学习的铁路限界快速检测算法[J].铁道科学与工程学报,2023,20(4):1223-1231.WANG Hui,WU Yujie,FAN Zizhu,et al.Fast detection algorithm of railway clearance based on deep learning[J].Journal of Railway Science and Engineering,2023,20(4):1223-1231

    • [8] 李媛.基于深度学习的高速铁路异物侵限检测的研究[D].兰州:兰州交通大学,2022.LI Yuan.Research on foreign body penetration detection of high-speed railway based on deep learning[D].Lanzhou:Lanzhou Jiaotong University,2022

    • [9] 刘力.基于深度学习的轨道侵限异物检测方法研究[D].兰州:兰州交通大学,2022.LIU Li.Research on detection method of railway intrusion obstacles based on deep learning[D].Lanzhou:Lanzhou Jiatong University,2022

    • [10] 缪希仁,刘志颖,鄢齐晨.无人机输电线路智能巡检技术综述[J].福州大学学报(自然科学版),2020,48(2):198-209.MIAO Xiren,LIU Zhiying,YAN Qichen.Review on UAV intelligent technology for transmission line inspection[J].Journal of Fuzhou University(Natural Science Edition),2020,48(2):198-209

    • [11] Azad R,Asadi-Aghbolaghi M,Fathy M,et al.Attention Deeplabv3+:multi-level context attention mechanism for skin lesion segmentation[C]//European Conference on Computer Vision.Cham:Springer,2020:251-266

    • [12] 矫健,张磊,李晶.基于空洞空间金字塔池化的雾天图像语义分割[J].计算机应用研究,2021,38(7):2200-2202.JIAO Jian,ZHANG Lei,LI Jing.Semantic segmentation of foggy images based on atrous spatial pyramid pooling[J].Application Research of Computers,2021,38(7):2200-2202

    • [13] 毛志荣,都云程,肖诗斌,等.基于ECA-Net与多尺度结合的细粒度图像分类方法[J].计算机应用研究,2021,38(11):3484-3488.MAO Zhirong,DU Yuncheng,XIAO Shibin,et al.Fine-grained image classification method based on ECA-Net and multi-scale[J].Application Research of Computers,2021,38(11):3484-3488

    • [14] 唐渔,何志琴,周宇辉,等.基于Se-ResNet50特征编码器的公共环境图像描述生成[J].计算机应用研究,2023,40(6):1864-1869.TANG Yu,HE Zhiqin,ZHOU Yuhui,et al.Public environment image caption generation based on Se-ResNet50 feature encoder[J].Computer Application Research,2023,40(6):1864-1869

    • [15] 张永宏,袁永.基于小波包分解和形态学融合的地基云图边缘检测[J].南京信息工程大学学报(自然科学版),2011,3(2):150-153.ZHANG Yonghong,YUAN Yong.Ground nephogram edge detection based on the fusion technique between wavelet package transform and morphological method[J].Journal of Nanjing University of Information Science & Technology(Natural Science Edition),2011,3(2):150-153

    • [16] 辛超,刘扬.基于概率霍夫变换的车道线识别算法[J].测绘通报,2019(增刊2):52-55.XIN Chao,LIU Yang.Research on lane recognition algorithm based on probability Hough transform[J].Bulletin of Surveying and Mapping,2019(sup2):52-55

    • [17] 慕羡,刘明珠.分析摄影测量图像处理的高精度误差补偿法[J].电子测试,2021(17):114-115,90.MU Xian,LIU Mingzhu.A high precision error compensation method for photogrammetric image processing is analyzed[J].Electronic Test,2021(17):114-115,90

  • 地址:江苏省南京市宁六路219号    邮编:210044

    联系电话:025-58731025    E-mail:nxdxb@nuist.edu.cn

    南京信息工程大学学报 ® 2024 版权所有  技术支持:北京勤云科技发展有限公司