基于直线段检测和LT描述符的矿井图像线特征匹配算法

朱代先, 秋强, 孔浩然, 胡其胜, 刘树林

朱代先,秋强,孔浩然,等. 基于直线段检测和LT描述符的矿井图像线特征匹配算法[J]. 工矿自动化,2024,50(2):72-82. DOI: 10.13272/j.issn.1671-251x.2023090045
引用本文: 朱代先,秋强,孔浩然,等. 基于直线段检测和LT描述符的矿井图像线特征匹配算法[J]. 工矿自动化,2024,50(2):72-82. DOI: 10.13272/j.issn.1671-251x.2023090045
ZHU Daixian, QIU Qiang, KONG Haoran, et al. A line feature matching algorithm for mine images based on line segment detection and LT descriptors[J]. Journal of Mine Automation,2024,50(2):72-82. DOI: 10.13272/j.issn.1671-251x.2023090045
Citation: ZHU Daixian, QIU Qiang, KONG Haoran, et al. A line feature matching algorithm for mine images based on line segment detection and LT descriptors[J]. Journal of Mine Automation,2024,50(2):72-82. DOI: 10.13272/j.issn.1671-251x.2023090045

基于直线段检测和LT描述符的矿井图像线特征匹配算法

基金项目: 陕西省重点研发计划项目(2021GY-338);西安市碑林区科技计划项目(GX2333)。
详细信息
    作者简介:

    朱代先(1970—),男,安徽安庆人,副教授,博士研究生,主要从事智能机器人、嵌入式系统方面的研究工作,E-mail:zhudaixian@xust.edu.cn

    通讯作者:

    秋强(1996—),男,陕西咸阳人,硕士研究生,研究方向为计算机视觉,E-mail:qiuqiang1168@163.com

  • 中图分类号: TD67

A line feature matching algorithm for mine images based on line segment detection and LT descriptors

  • 摘要: 图像匹配是同步定位与地图构建(SLAM)技术中极为重要的一环,用于根据图像之间的变换关系确定相机位姿。基于线特征的图像匹配方法具有较强的鲁棒性和抗噪能力,更加适用于井下图像匹配,基于深度学习的线描述符对线段遮挡等场景具有较高的鲁棒性,性能优于传统描述符,但卷积神经网络架构的描述符将可变长度线段抽象为固定维进行描述,不利于线段长度及视差变化较大图像的匹配。针对上述问题,提出一种基于直线段检测和线描述符的矿井图像线特征匹配算法。在频域利用单参数同态滤波降低图像的照射分量,并增强反射分量,提升亮度及对比度;在YUV空间利用对比度受限的自适应直方图均衡化(CLAHE)算法对亮度分量进行均衡,使亮度分布更加均匀;变换至RGB空间提取直线段检测(LSD)线,引入一种基于Transformer架构的LT描述符构建LSD线的特征向量,最后完成线特征匹配。实验结果表明:该算法结合了同态滤波和CLAHE算法的优点,增强后图像的亮度适中,对比度良好,灰度分布均匀,增强效果优于单参数同态滤波算法、EnlightenGAN算法;该算法提取的线特征数较原图平均提升了32.92%,在不同相似纹理占比、不同程度旋转与平移变化的井下图像匹配中鲁棒性好,平均正确匹配数为61.75对,平均精度为86.83%,优于线二进制描述符(LBD)算法、LBD_NNDR算法、LT算法,能够满足矿井图像稳健匹配的需求。
    Abstract: Image matching is an extremely important part of simultaneous localization and mapping (SLAM) technology. It is used to determine camera position and posture based on the transformation relationship between images. The image matching method based on line features has strong robustness and noise resistance, making it more suitable for underground image matching. The line descriptors based on deep learning have high robustness to scenes such as line segment occlusion, and their performance is better than traditional descriptors. However, the descriptors of convolutional neural network architecture abstract variable length line segments into fixed dimensions for description, which is not conducive to matching images with large changes in line segment length and parallax. In order to solve the above problems, a line feature matching algorithm for mine images based on line segment detection and line transformers (LT) is proposed. The algorithm uses single parameter homomorphic filtering in the frequency domain to reduce the lighting component of the image, enhance the reflection component, and improve brightness and contrast. The algorithm uses contrast limited adaptive histogram equalization (CLAHE) algorithm in YUV space to balance brightness components and make brightness distribution more even. The algorithm transforms to RGB space to extract line segment detection (LSD) lines. A LT descriptor based on Transformer architecture is introduced to construct the feature vector of LSD lines, and finally complete line feature matching. The experimental results show that the algorithm combines the advantages of homomorphic filtering and CLAHE algorithm. After image enhancement, the brightness of the image is moderate, the contrast is good, the grayscale distribution is even. The enhancement effect is better than the single parameter homomorphic filtering algorithm and EnlightenGAN algorithm. The number of line features extracted by this algorithm has increased by an average of 32.92% compared to the original image. It has good robustness in matching underground images with different proportions of similar textures, varying degrees of rotation and translation changes. The average correct matching number is 61.75 pairs, with an average precision of 86.83%. It is superior to the line binary descriptor (LBD) algorithm, LBD_NNDR algorithm, and LT algorithm. It can meet the requirements of robust matching of mine images.
  • 掘锚机作为煤矿主要掘进设备负责掘进、支护等任务[1-6],而滚筒作为掘锚机的主要截割部件,其性能直接影响掘锚机掘进效率。在实际工作过程中掘锚机所处工作面并非只有全煤层,由于国内各个矿区情况不同,部分工作面还存在不同形态的矸石层,在该工况下对掘锚机的掘进效率会产生一定影响。由于掘锚机发展时间较短,对掘锚机滚筒截割性能方面的仿真分析较少,而采煤机滚筒截割性能方面的研究较多,所以可通过借鉴采煤机滚筒截割相关文献开展掘锚机截割特性仿真研究。张敬东[7]以采煤机螺旋滚筒为对象建立了数学模型,分析了采煤机螺旋滚筒的机械性能。刘伟[8]根据煤岩性质,分析了切削厚度、滚筒转速、截齿安装角等因素对滚筒截割性能的影响,确定了适合采煤机工作的参数。张强等[9-10]分析了不同工况对采煤机截割性能的影响,并分析了转速、截齿安装角、截齿齿尖尖角等对滚筒机械性能的影响程度。毛君等[11-12]利用EDEM软件研究了采煤机截割煤岩的动态过程,对采煤机装煤率、截割阻力及截割比能耗等因素进行分析,为实现采煤机高效截割提供了参考。万理想[13]利用EDEM软件分析了不同厚度矸石层对采煤机螺旋滚筒截割性能的影响,为滚筒在不同夹矸煤层条件下的工作参数选择提供了数据支撑。

    上述文献大多是以全煤层工作面为研究背景对滚筒截割特性进行分析,虽有部分文献研究了滚筒在含矸石层工作面下的截割特性,但考虑的矸石层形态较为单一,而实际工况中矸石层形态多样,对滚筒截割特性的影响也不同。本文通过EDEM与RecurDyn软件耦合,对掘锚机滚筒截割过程进行动态仿真,分析不同形态矸石层对掘锚机滚筒截割特性的影响。

    以某矿区5−2煤层为研究背景,该煤层为特厚煤层,整体赋存较稳定,且煤层中含有矸石层[14]。为减少仿真时间,在EDEM软件中分别定义半径为25 mm的煤颗粒模型和半径为20 mm的矸石颗粒模型,如图1所示。

    图  1  颗粒模型
    Figure  1.  Particle model

    根据实际物体特性,设置煤岩材料参数,见表1,掘锚机各部分材料参数见表2。由于仿真分析的主要部件为滚筒,所以将掘锚机其余部分材料统一设置为合金钢。

    表  1  煤岩材料参数
    Table  1.  Material parameters of coal and rock
    材料密度/(kg·m−3泊松比剪切模量/Pa
    1 4200.321.9×108
    矸石2 3500.101.2×109
    下载: 导出CSV 
    | 显示表格
    表  2  掘锚机材料参数
    Table  2.  Material parameters of roadheader bolter
    名称材料密度/(kg·m−3泊松比剪切模量/Pa
    截齿42CrMo7 8000.38.2×1010
    筒毂16Mn7 8000.38.4×1010
    其余部分合金钢7 8000.37.0×1010
    下载: 导出CSV 
    | 显示表格

    根据煤、矸石和滚筒三者之间的作用情况,设置接触参数,见表3

    表  3  接触参数
    Table  3.  Contact parameters
    颗粒−颗粒恢复因数静摩擦因数动摩擦因数
    煤−煤0.50.60.05
    煤−矸石0.50.70.08
    煤−滚筒0.50.40.05
    矸石−矸石0.60.80.10
    矸石−滚筒0.60.50.07
    下载: 导出CSV 
    | 显示表格

    为便于更好地模拟煤岩及矸石的物理状态,采用Hertz-Mindlin Bonding模型建立颗粒粘结模型,如图2所示,颗粒间相互接触并承受一定的切向运动和法向运动[15-18]O1O2分别为颗粒1、颗粒2的圆心;R1R2分别为颗粒1、颗粒2的半径,mm;OB为粘结键截面的圆心;l为粘结键长度,mm;RB为颗粒粘结半径,mm;FnFt分别为颗粒间的法向粘结力、切向粘结力,N;TB为粘结键力矩,N·m。

    图  2  颗粒粘结模型
    Figure  2.  Particle bonding model

    通过在EDEM软件中设置单位面积法向刚度、单位面积切向刚度、法向应力和切向应力这4种参数,使颗粒间产生粘结键相互粘结,当作用力超过粘结强度时,颗粒粘结键将发生破坏。

    法向应力与切向应力最大值应满足以下条件[19]

    $$ \left\{ {\begin{array}{*{20}{l}} {{\sigma _{{\rm{nmax}} }} < \dfrac{{ - {F_{\rm{n}}}}}{A} + \dfrac{{2{T_{\rm{n}}}}}{J}{R_{\rm{B}}}} \\ {{\sigma _{{\rm{tmax}} }} < \dfrac{{ - {F_{\rm{t}}}}}{A} + \dfrac{{{T_{\rm{t}}}}}{J}{R_{\rm{B}}}} \end{array}} \right. $$ (1)
    $$ A = {\text{π}} R_{\rm{B}}^2 $$ (2)
    $$ J = \frac{1}{2}{\text{π}} R_{\rm{B}}^{\text{4}} $$ (3)
    $$ {R_{\rm{B}}} = \sqrt {{R_{\text{1}}}{R_{\text{2}}}} $$ (4)

    式中:σnmaxσtmax分别为颗粒间的法向应力、切向应力最大值,MPa;A为单位接触面积,mm²;TnTt分别为颗粒间的法向力矩、切向力矩,N·m;J为极惯性矩,mm4

    颗粒间的粘结力和力矩随时间步变化的数学表达式为[20]

    $$ \left\{ {\begin{array}{*{20}{l}} {\delta {F_{\rm{n}}} = - {v_{\rm{n}}}{S_{\rm{n}}}A\delta t} \\ {\delta {F_{\rm{t}}} = - {v_{\rm{t}}}{S_{\rm{t}}}A\delta t} \\ {\delta {T_{\rm{n}}} = - {\omega _{\rm{n}}}{S_{\rm{n}}}J\delta t} \\ {\delta {T_{\rm{t}}} = - {\omega _{\rm{t}}}{S_{\rm{t}}}\dfrac{J}{2}\delta t} \end{array}} \right. $$ (5)

    式中:vnvt分别为颗粒间的法向速度、切向速度,m/s;SnSt分别为颗粒间的法向接触刚度、切向接触刚度,N/m;t为时间,s;ωnωt分别为颗粒间的法向角速度、切向角速度,rad/s。

    将煤与矸石的参数代入式(1)−式(5),计算得出颗粒粘结参数,见表4

    表  4  颗粒粘结参数
    Table  4.  Particle bonding parameters
    颗粒−颗粒单位面积法
    向刚度/(N·m−3
    单位面积切
    向刚度/(N·m−3
    法向应力/
    Pa
    切向应力/
    Pa
    煤−煤6.0×1081.8×1094.0×1046.0×105
    煤−矸石1.0×1092.4×1096.8×1048.0×106
    矸石−矸石2.8×1092.7×1091.9×1059.0×106
    下载: 导出CSV 
    | 显示表格

    以MB670−1型掘锚机为例,其工作高度为2.8~5.0 m,工作宽度为5.0~6.2 m[21]。因此,在EDEM软件中建立5.5 m×1.5 m×3.0 m(长×宽×高)的箱体作为掘进工作面,建立5.5 m×8.0 m×0.3 m(长×宽×高)的箱体作为巷道底板。实际煤层中主要分布水平矸石层、斜矸石层、半矸石层3种形态的矸石层,为确保仿真的准确性,使模拟不同矸石层形态的箱体体积保持统一,具体参数见表5

    表  5  不同形态矸石层参数
    Table  5.  Parameters of different gangue layer
    矸石层形态箱体尺寸/m箱体体积/m³矸石颗粒数量/个
    水平矸石层5.501.50.32.47518 954
    斜矸石层5.501.50.319 026
    半矸石层2.751.50.619 105
    下载: 导出CSV 
    | 显示表格

    矸石颗粒数量偏差为

    $$ \eta = \frac{{{N_{\max }} - {N_{\min }}}}{{{N_{\min }}}} $$ (6)

    式中NmaxNmin分别为最大、最小矸石颗粒数量。

    通过式(6)计算出3种矸石层形态下生成的矸石颗粒数量偏差为0.8%,在误差允许范围内,可忽略不计。

    通过多次静态颗粒填充后生成3种含矸石层工作面模型,如图3所示。

    图  3  含矸石层工作面模型
    Figure  3.  Working face model of gangue bearing layer

    通过Pro/E软件对MB670−1型掘锚机进行三维建模,如图4所示。沿掘锚机掘进方向为X轴,垂直于巷道底板方向为Y轴,与滚筒轴平行方向为Z轴。

    图  4  掘锚机三维模型
    Figure  4.  3D model of roadheader bolter

    将掘锚机三维模型导入RecurDyn软件并添加相应的运动副,如图5所示。

    图  5  运动副
    Figure  5.  Motion pair

    在滚筒处添加旋转副,保证滚筒完成截割运动,在滑动支架处添加移动副,保证滚筒完成掏槽运动。各运动对应的函数:滚筒旋转,step(time,0,0,0.5,−3.22);滚筒掘进,step(time,0,0,0.5,50)。

    在RecurDyn软件中设置运动副后,将模型保存为.wall文件并导入EDEM软件,去除巷道底板、截割面煤壁与掘锚机接触的面,设置掘锚机材料为钢,打开耦合接口,建立EDEM−RecurDyn耦合仿真模型,如图6所示。

    图  6  EDEM−RecurDyn耦合仿真模型
    Figure  6.  EDEM-RecurDyn coupling simulation model

    在EDEM软件中设定网格尺寸为最小颗粒半径的3倍,数据存储间隔为0.1 s;在RecurDyn软件中设定仿真步数为40,仿真时长为10 s。

    截割阻力是滚筒截割过程中所有截齿沿Y轴所受载荷之和,其表达式为

    $$ f = \sum\limits_{i = 1}^k {{L_i}} $$ (7)

    式中:f为截割阻力,N;Li为第ii=1,2,…,kk为瞬时参与截割的截齿总数)个截齿沿Y轴所受载荷,N。

    不同形态矸石层下滚筒所受截割阻力如图7所示。

    图  7  不同形态矸石层下滚筒所受截割阻力曲线
    Figure  7.  Cutting resistance curves of drum under different gangue layers

    图7可知,随着滚筒不断掘进,截割阻力逐渐增加并在5~6 s达到峰值,随后不断减小。不同形态矸石层下滚筒截割阻力均值见表6

    表  6  不同形态矸石层下滚筒截割阻力均值
    Table  6.  Mean cutting resistance of drum under different gangue layers
    矸石层形态截割阻力均值/N截割阻力均值增长率/%
    全煤层6.74×104
    水平矸石层8.93×10432.49
    斜矸石层9.14×10435.61
    半矸石层8.48×10425.82
    下载: 导出CSV 
    | 显示表格

    表6可知,矸石层的存在使滚筒截割阻力有所增加,矸石层形态对滚筒截割阻力的影响程度:斜矸石层>水平矸石层>半矸石层。当工作煤层为斜矸石层时,滚筒所受截割阻力均值相较于全煤层时增大了35.61%,斜矸石层对滚筒的影响较为严重。

    载荷波动系数是指滚筒所受载荷的波动大小,其表达式为[22]

    $$ \varepsilon = \frac{1}{{\overline L }}\sqrt {\frac{1}{c}\sum\limits_{r = 1}^c {{{\left( {{L_r} - \overline L } \right)}^2}} } $$ (8)
    $$ \overline L = \frac{1}{c}\sum\limits_{r = 1}^c {{L_r}} $$ (9)

    式中:ε为载荷波动系数;$\overline L $为滚筒载荷均值,N;Lr为第rr=1,2,…,cc为记录滚筒载荷的时刻点数)时刻滚筒瞬时载荷,N。

    在EDEM的后处理模块,导出滚筒载荷数据,分别求出不同形态矸石层下滚筒载荷波动系数,见表7

    表  7  不同矸石层形态下滚筒载荷波动系数
    Table  7.  Drum load fluctuation coefficient under different gangue layers
    矸石层形态方向载荷均值/N载荷波动系数载荷波动系数增长率/%
    全煤层X−9.46×1040.56
    Y6.74×1040.63
    Z3.19×1034.52
    水平矸石层X−1.24×1040.583.57
    Y8.93×1040.687.94
    Z5.14×1035.4620.79
    斜矸石层X−1.49×1040.7126.79
    Y9.14×1040.7925.39
    Z3.56×1037.2961.28
    半矸石层X−1.17×1050.571.79
    Y8.48×1040.664.76
    Z7.58×1034.806.19
    下载: 导出CSV 
    | 显示表格

    表7可知,矸石层形态对滚筒载荷波动系数的影响程度:斜矸石层>水平矸石层>半矸石层。滚筒在截割斜矸石层时,相比于全煤层时XYZ轴载荷波动系数增长率分别达到了26.79%,25.39%,61.28%,此时滚筒截割性能受到严重影响。

    截割比能耗是指滚筒截割单位体积煤岩时所消耗的能量,其表达式为

    $$ {H_{\rm{w}}} = \frac{{{\rho }{t_{\rm{c}}}n\overline M }}{{9 \; 550 \times 3 \; 600 \; {{m}}}} $$ (10)

    式中:Hw为截割比能耗,kW·h/m3ρ为煤岩密度,kg/m3tc为截割时间,s;n为滚筒转速,r/min;$\overline M $为滚筒转矩均值,N·m;m为截落煤岩质量,kg。

    根据式(9)计算出不同形态矸石层下滚筒截割比能耗,见表8

    表  8  不同形态矸石层下滚筒截割比能耗
    Table  8.  Specific cutting energy consumption of drum under different gangue layers
    矸石层形态截割比能耗/(kW·h·m−3截割比能耗增长率/%
    全煤层3.01
    水平矸石层3.4514.62
    斜矸石层4.1337.21
    半矸石层3.154.65
    下载: 导出CSV 
    | 显示表格

    表8可知,矸石层形态对滚筒截割比能耗的影响程度:斜矸石层>水平矸石层>半矸石层。滚筒在截割斜矸石层时截割比能耗达到最大,为4.13 kW·h/m3,相较于截割全煤层时增长了37.21%;滚筒在截割半矸石层时截割比能耗最小,为3.15 kW·h/m3,相较于截割全煤层时增长了4.65%。

    在RecurDyn软件中导出不同形态矸石层下滚筒沿Y轴位移曲线,如图8所示。

    图  8  不同形态矸石层下滚筒位移曲线
    Figure  8.  Drum displacement curves under different gangue layers

    图8可知,矸石层形态对滚筒位移的影响程度:斜矸石层>水平矸石层>半矸石层。相比于全煤层,在水平矸石层、斜矸石层、半矸石层条件下滚筒位移分别缩短了53,89,14 mm,在斜矸石层条件下滚筒位移最短。

    滚筒在截割过程中受到载荷影响会产生振动现象[23],严重时会对滚筒造成一定危害。为分析不同形态矸石层对滚筒振动的影响,在RecurDyn软件中导出不同形态矸石层下滚筒加速度曲线,如图9所示(滚筒在截割初期未达到稳定截割状态,因此加速度在0~1 s时出现大幅度变化,随后波动逐渐稳定)。

    图  9  不同形态矸石层下滚筒加速度变化曲线
    Figure  9.  Drum acceleration variation curves under different gangue layers

    图9可知,矸石层形态对滚筒振动的影响程度:斜矸石层>水平矸石层>半矸石层。滚筒在截割斜矸石层时振动幅度最大。

    1) 通过EDEM−RecurDyn耦合对滚筒在不同形态矸石层下截割过程进行动态仿真,模拟掘锚机实际工作时可能会遇到的多种复杂煤层条件,解决了传统仿真分析时截割煤岩属性单一和矸石层形态单一的问题。

    2) 矸石层的存在使滚筒截割阻力、载荷波动系数、截割比能耗有所增加,尤其在斜矸石层条件下增加最明显,相比于在全煤层条件下,截割阻力均值增大了35.61%,XYZ轴载荷波动系数分别增大了26.79%,25.39%,61.28%,截割比能耗增大了37.21%。

    3) 矸石层的存在使滚筒位移有所减小,尤其在斜矸石层条件下滚筒位移最短,相较于全煤层条件下滚筒位移缩短了89 mm。

    4) 滚筒截割不同形态矸石层时产生的振动幅度不同,滚筒截割全煤层工作面时产生的振动远小于含矸石层工作面。

  • 图  1   基于LSD和LT描述符的矿井图像线特征匹配算法流程

    Figure  1.   Process of mine image line feature matching algorithm based on line segment detector(LSD) and line transformers(LT) descriptor

    图  2   高斯型同态滤波传递函数

    Figure  2.   Transfer function of gaussian homomorphic filtering

    图  3   单参数同态滤波传递函数

    Figure  3.   Transfer function of single parameter homomorphic filter

    图  4   CLAHE原理

    Figure  4.   Principle of contrast limited adaptive histogram equalization(CLAHE)

    图  5   基于LSD和LT描述符的矿井图像线特征匹配算法模型

    Figure  5.   Model of mine image line feature matching algorithm based on LSD and LT descriptor

    图  6   图像增强结果

    Figure  6.   Image enhancement results

    图  7   灰度直方图对比结果

    Figure  7.   Comparison results of gray histogram

    图  8   LSD提取对比

    Figure  8.   LSD extraction comparison

    图  9   实验图像

    Figure  9.   Experimental images

    图  10   图像1匹配结果

    Figure  10.   Image 1 matching results

    图  11   图像2匹配结果

    Figure  11.   Image 2 matching results

    图  12   图像3匹配结果

    Figure  12.   Image 3 matching results

    图  13   图像4匹配结果

    Figure  13.   Image 4 matching results

    图  14   平均精度统计

    Figure  14.   Average accuracy statistics

    图  15   平均正确匹配数统计

    Figure  15.   Statistics of the average number of correct matches

    表  1   LT描述符的训练参数

    Table  1   Training parameters of the LT descriptor

    参数
    学习率 0.001
    训练轮次 1 000
    图像大小 640×480
    线长度最小阈值 16
    最大Token数 21
    Token间距 8
    描述符维度 256
    注意力头数量 4
    编码器特征维数 [32 64 128 256]
    线段描述层数量 12
    前馈层内部维度 1 024
    签名网络层数 7
    Transformer编码器层数 12
    下载: 导出CSV

    表  2   图像增强结果统计

    Table  2   Statistics of image enhancement results

    算法 标准差 均值 信息熵 PSNR
    改进同态滤波算法 63.583 123.820 7.712 10.014
    EnlightenGAN算法 63.312 153.775 7.683 7.598
    本文算法 64.108 129.174 7.798 10.178
    下载: 导出CSV

    表  3   LSD线段提取数量

    Table  3   LSD line segment extraction quantity

    采集点帧数LSD线平均数/条增长率/%
    原图本文算法增强图像
    巷道48094.8125.632.49
    水房218120.5166.438.09
    工作面324138.8181.530.85
    避难硐室780184.4244.832.75
    平均值144.6192.232.92
    下载: 导出CSV

    表  4   图像属性

    Table  4   Image attributes

    图像序号 采集位置 旋转与平移程度 相似纹理占比
    1 巷道 较小 较小
    2 避难硐室 较小 较大
    3 巷道 较大 较小
    4 避难硐室 较大 较大
    下载: 导出CSV

    表  5   线特征匹配实验数据统计

    Table  5   Statistics of experimental data of line feature matching

    图像
    序号
    变化
    程度
    相似纹
    理占比
    算法 线特征数量/条 同名直
    线数/对
    正确匹
    配数/对
    匹配
    精度/%
    1 较小 较小 LBD 125 105 62 53 85.48
    LBD_NNDR 125 105 58 52 89.65
    LT 125 105 51 46 90.19
    本文算法 149 130 63 58 92.06
    2 较小 较大 LBD 180 182 50 28 56.00
    LBD_NNDR 180 182 33 25 75.76
    LT 180 182 62 52 83.87
    本文算法 327 335 123 100 85.47
    3 较大 较小 LBD 100 181 20 12 60.00
    LBD_NNDR 100 181 15 11 73.33
    LT 100 181 37 34 91.89
    本文算法 137 258 42 39 92.86
    4 较大 较大 LBD 287 252 60 9 15.00
    LBD_NNDR 287 252 18 8 44.44
    LT 287 252 55 38 69.09
    本文算法 350 385 65 50 76.92
    下载: 导出CSV
  • [1] 王国法,任世华,庞义辉,等. 煤炭工业“十三五”发展成效与“双碳”目标实施路径[J]. 煤炭科学技术,2021,49(9):1-8.

    WANG Guofa,REN Shihua,PANG Yihui,et al. Development achievements of China' s coal industry during the 13th Five-Year Plan period and implementation path of "dual carbon" target[J]. Coal Science and Technology,2021,49(9):1-8.

    [2] 程德强,钱建生,郭星歌,等. 煤矿安全生产视频AI识别关键技术研究综述[J]. 煤炭科学技术,2023,51(2):349-365.

    CHENG Deqiang,QIAN Jiansheng,GUO Xingge,et al. Review on key technologies of AI recognition for videos in coal mine[J]. Coal Science and Technology,2023,51(2):349-365.

    [3] 苗升,刘小雄,黄剑雄,等. 无人机视觉SLAM环境感知发展研究[J]. 计算机测量与控制,2021,29(8):1-6,41.

    MIAO Sheng,LIU Xiaoxiong,HUANG Jianxiong,et al. Research on development of UAV visual SLAM environment perception[J]. Computer Measurement & Control,2021,29(8):1-6,41.

    [4] 孔二伟,张亚邦,李佳悦,等. 面向煤矿井下低光照图像的增强方法[J]. 工矿自动化,2023,49(4):62-69,85.

    KONG Erwei,ZHANG Yabang,LI Jiayue,et al. An enhancement method for low light images in coal mines[J]. Journal of Mine Automation,2023,49(4):62-69,85.

    [5] 赵良玉,金瑞,朱叶青,等. 基于点线特征融合的双目惯性SLAM算法[J]. 航空学报,2022,43(3):363-377.

    ZHAO Liangyu,JIN Rui,ZHU Yeqing,et al. Stereo visual-inertial SLAM algorithm based on merge of point and line features[J]. Acta Aeronautica et Astronautica Sinica,2022,43(3):363-377.

    [6]

    ZHU Daixian,JI Kangkang,WU Dong,et al. A coupled visual and inertial measurement units method for locating and mapping in coal mine tunnel[J]. Sensors,2022,22(19). DOI: 10.3390/s22197437.

    [7] 谢晓佳. 基于点线综合特征的双目视觉SLAM方法[D]. 杭州:浙江大学,2017.

    XIE Xiaojia. Stereo visual SLAM using point and line features[D]. Hangzhou:Zhejiang University,2017.

    [8]

    WANG Wei,GAO Wei,CUI Hainan,et al. Reconstruction of lines and planes of urban buildings with angle regularization[J]. ISPRS Journal of Photogrammetry and Remote Sensing,2020,165:54-66. DOI: 10.1016/j.isprsjprs.2020.04.013

    [9] 宋佳璇,范大昭,董杨,等. 神经网络学习与灰度信息结合的跨视角影像线特征匹配算法[J]. 测绘学报,2023,52(6):990-999. DOI: 10.11947/j.AGCS.2023.20220468

    SONG Jiaxuan,FAN Dazhao,DONG Yang,et al. Line matching algorithm for cross-view images combining neural network learning with grayscale information[J]. Acta Geodaetica et Cartographica Sinica,2023,52(6):990-999. DOI: 10.11947/j.AGCS.2023.20220468

    [10]

    CHEN Min,YAN Shaohua,QIN Rongjun,et al. Hierarchical line segment matching for wide-baseline images via exploiting viewpoint robust local structure and geometric constraints[J]. ISPRS Journal of Photogrammetry and Remote Sensing,2021,181:48-66. DOI: 10.1016/j.isprsjprs.2021.09.002

    [11]

    CHEN Min,LI Wen,FANG Tong,et al. An adaptive feature region-based line segment matching method for viewpoint-changed images with discontinuous parallax and poor textures[J]. International Journal of Applied Earth Observation and Geoinformation,2023,117. DOI: 10.1016/j.jag.2023.103209.

    [12]

    LANGE M,SCHWEINFURTH F,SCHILLING A. DLD:a deep learning based line descriptor for line feature matching[C]. IEEE/RSJ International Conference on Intelligent Robots and Systems,Macau,2019:5910-5915.

    [13] 王竞雪,刘肃艳,王伟玺. 联合共线约束与匹配冗余的组直线匹配结果检核算法[J]. 测绘学报,2020,49(6):746-756.

    WANG Jingxue,LIU Suyan,WANG Weixi. A checking algorithm for pair-wise line matching based on collinearity constraint and matching redundancy[J]. Acta Geodaetica et Cartographica Sinica,2020,49(6):746-756.

    [14]

    LI Gang,ZENG Yawen,HUANG Huilan,et al. A multi-feature fusion slam system attaching semantic invariant to points and lines[J]. Sensors,2021,21(4). DOI: 10.3390/s21041196.

    [15]

    ZHENG Xianwei,YUAN Zhuang,DONG Zhen,et al. Smoothly varying projective transformation for line segment matching[J]. ISPRS Journal of Photogrammetry and Remote Sensing,2022,183:129-146. DOI: 10.1016/j.isprsjprs.2021.10.017

    [16]

    WANG Qiang,ZHANG Wei,LIU Xiaolong,et al. Line matching of wide baseline images in an affine projection space[J]. International Journal of Remote Sensing,2020,41(2):632-654. DOI: 10.1080/01431161.2019.1646937

    [17]

    SHEN Liang,ZHU Jiahua,XIN Qin,et al. Robust line segment mismatch removal using point-pair representation and Gaussian-uniform mixture formulation[J]. ISPRS Journal of Photogrammetry and Remote Sensing,2023,203:314-327. DOI: 10.1016/j.isprsjprs.2023.08.003

    [18] 刘肃艳,王竞雪,沈昭宇,等. 结合线对几何特征及单线描述符约束的直线匹配算法[J]. 武汉大学学报(信息科学版),2023,48(6):936-949.

    LIU Suyan,WANG Jingxue,SHEN Zhaoyu,et al. Line matching algorithm based on pair-wise geometric features and individual line descriptor constraints[J]. Geomatics and Information Science of Wuhan University,2023,48(6):936-949.

    [19] 张珊,张卡,赵立科,等. 结合网状描述符和单应约束的近景影像直线匹配[J]. 地球信息科学学报,2022,24(11):2186-2197.

    ZHANG Shan,ZHANG Ka,ZHAO Like,et al. Close-range image line matching based on mesh descriptor and homography constraint[J]. Journal of Geo-information Science,2022,24(11):2186-2197.

    [20]

    VAKHITOV A,LEMPITSKY A. Learnable line segment descriptor for visual SLAM[J]. IEEE Access,2019,7:39923-39934. DOI: 10.1109/ACCESS.2019.2901584

    [21]

    LANGE M,RAISCH C,SCHILLING A. WLD:a wavelet and learning based line descriptor for line feature matching[M]//KRÜGER J,NIESSNER M,STÜCKLER J. Vision,modeling,and visualization. Eindhoven:The Eurographics Association,2020:39-46.

    [22]

    PAUTRAT R,LIN J T,LARSSON V,et al. SOLD2:self-supervised occlusion-aware line description and detection[C]. IEEE/CVF Conference on Computer Vision and Pattern Recognition,Nashville,2021:11368-11378.

    [23]

    YOON S,KIM A. Line as a visual sentence:context-aware line descriptor for visual localization[J]. IEEE Robotics and Automation Letters,2021,6(4):8726-8733. DOI: 10.1109/LRA.2021.3111760

    [24]

    GUO Chunle,LI Chongyi,GUO Jichang,et al. Zero-reference deep curve estimation for low-light image enhancement[C]. IEEE/CVF Conference on Computer Vision and Pattern Recognition,Seattle,2020:1777-1786.

    [25] 郭永坤,朱彦陈,刘莉萍,等. 空频域图像增强方法研究综述[J]. 计算机工程与应用,2022,58(11):23-32.

    GUO Yongkun,ZHU Yanchen,LIU Liping,et al. Research review of space-frequency domain image enhancement methods[J]. Computer Engineering and Applications,2022,58(11):23-32.

    [26] 王智奇,李荣冰,刘建业,等. 基于同态滤波和直方图均衡化的图像增强算法[J]. 电子测量技术,2020,43(24):75-80.

    WANG Zhiqi,LI Rongbing,LIU Jianye,et al. Image enhancement algorithm based on homomorphic filtering and histogram equalization[J]. Electronic Measurement Technology,2020,43(24):75-80.

    [27]

    HANA F M,MAULIDA I D. Analysis of contrast limited adaptive histogram equalization (CLAHE) parameters on finger knuckle print identification[J]. Journal of Physics:Conference Series,2021,1764. DOI: 10.1088/1742-6596/1764/1/012049.

    [28]

    JIANG Yifan,GONG Xinyu,LIU Ding,et al. EnlightenGAN:deep light enhancement without paired supervision[J]. IEEE Transactions on Image Processing,2021,30:2340-2349. DOI: 10.1109/TIP.2021.3051462

    [29] 高宇彤. 基于透视变换与LBD描述子约束的特征线匹配算法[D]. 阜新:辽宁工程技术大学,2022.

    GAO Yutong. Feature line matching algorithm based on perspective transformation and LBD descriptor constraint[D]. Fuxin:Liaoning Technical University,2022.

  • 期刊类型引用(11)

    1. 王景鑫, 贾世宇, 刘玉石, 康丙超. 基于大语言模型的油田异常井智能识别和自动化预警系统. 自动化与仪器仪表. 2025(06) 百度学术
    2. 杜明泽,孔繁龙,费宇. 联络巷防水密闭墙稳定性评价与位置优化研究. 工程科学与技术. 2025(01): 264-273 . 百度学术
    3. 陈强,宫改花,张贾军. 基于超声波和北斗定位技术的作业范围自动化监测预警技术研究. 电子设计工程. 2025(03): 168-173 . 百度学术
    4. 赵荣妹,朱家红,李建英,陈川. 煤矿电气自动化监控系统中的AI异常检测与智能预警机制. 中小企业管理与科技. 2025(02): 138-140+144 . 百度学术
    5. 钟振成,王海棠,刘立国,魏世荣. 基于传感器实时监测的矿井突水水源远程自动化监测系统. 自动化与仪表. 2025(05): 76-79 . 百度学术
    6. 邓军,李鑫,王凯,王伟峰,闫军,汤宗情,康付如,任帅京. 矿井火灾智能监测预警技术近20年研究进展及展望. 煤炭科学技术. 2024(01): 154-177 . 百度学术
    7. 邢震. 面向智能矿山的数字孪生技术研究进展. 工矿自动化. 2024(03): 22-34+41 . 本站查看
    8. 王昕彤. 基于大数据和人工智能的矿山安全预警与监控. 信息与电脑(理论版). 2024(01): 202-204 . 百度学术
    9. 魏跃东. 煤矿采空区地面塌陷风险自动预警方法. 自动化应用. 2024(16): 26-29 . 百度学术
    10. 江鹤,程德强,乙夫迪,汪鹏,崔文,寇旗旗. 新一代信息技术在智能矿山中的研究与应用综述. 工矿自动化. 2024(11): 1-16 . 本站查看
    11. 生帅. 信息化监测技术在西部地区建井期间的应用. 建井技术. 2024(06): 19-24 . 百度学术

    其他类型引用(3)

图(15)  /  表(5)
计量
  • 文章访问数:  138
  • HTML全文浏览量:  40
  • PDF下载量:  23
  • 被引次数: 14
出版历程
  • 收稿日期:  2023-09-13
  • 修回日期:  2024-02-20
  • 网络出版日期:  2024-03-03
  • 刊出日期:  2024-02-24

目录

/

返回文章
返回