基于光滑粒子动力学顶煤放落与输送过程仿真研究

刘波, 张强, 刘洋, 董祥伟

刘波,张强,刘洋,等. 基于光滑粒子动力学顶煤放落与输送过程仿真研究[J]. 工矿自动化,2024,50(9):47-58. DOI: 10.13272/j.issn.1671-251x.2024060003
引用本文: 刘波,张强,刘洋,等. 基于光滑粒子动力学顶煤放落与输送过程仿真研究[J]. 工矿自动化,2024,50(9):47-58. DOI: 10.13272/j.issn.1671-251x.2024060003
LIU Bo, ZHANG Qiang, LIU Yang, et al. Simulation study of top coal caving and conveying process based on smoothed particle hydrodynamics[J]. Journal of Mine Automation,2024,50(9):47-58. DOI: 10.13272/j.issn.1671-251x.2024060003
Citation: LIU Bo, ZHANG Qiang, LIU Yang, et al. Simulation study of top coal caving and conveying process based on smoothed particle hydrodynamics[J]. Journal of Mine Automation,2024,50(9):47-58. DOI: 10.13272/j.issn.1671-251x.2024060003

基于光滑粒子动力学顶煤放落与输送过程仿真研究

基金项目: 国家自然科学基金重点资助项目 (52234005)。
详细信息
    作者简介:

    刘波(1984—),男,内蒙古五原人,高级工程师,硕士,主要从事煤矿智能化建设工作,E-mail:10771334@qq.com。通信作者:董祥伟(1986—),男,山东潍坊人,讲师,博士,研究方向为多场耦合破岩机理、无网格模拟方法等,E-mail: dongxw139@163.com

  • 中图分类号: TD821

Simulation study of top coal caving and conveying process based on smoothed particle hydrodynamics

  • 摘要: 目前针对综放开采中顶煤放出规律的数值模拟研究中,对于顶煤运动的连续−非连续性问题需复杂的耦合算法,必须解决煤岩界面信息精确交互问题,且忽略了刮板输送机输送过程。针对该问题,基于光滑粒子动力学构建了无网格数值计算模型,通过建立连续介质力学控制方程的光滑粒子动力学离散方程,并引入弹塑性土体本构模型和Drucker−Prager屈服准则,实现了顶煤坍塌、运移、放出过程的动态模拟。考虑采场实际放煤和输煤过程,构建了刮板输送机模型,模拟沿工作面水平方向顶煤放出和底煤输送过程,得到不同刮板输送机运行速度(0~1.5 m/s)下的煤岩界面和煤流速度变化规律。仿真结果表明:弹塑性土体本构模型可有效模拟颗粒的流动行为,通过设定摩擦角、弹性模量等材料参数,避免了传统离散元法模型的参数不定问题;煤流速度稳定后,放煤口附近的顶煤应力分布呈 “双峰”形态;刮板输送机运行速度对放煤时间影响较大,但对终止的煤岩界面和放出体形状影响较小;多支架同时放煤需考虑刮板输送机的输送能力,不同支架之间的底煤输送干涉可能导致放煤口的堵塞效应; “见矸关门”准则导致不同放煤口放煤量存在差异,40个放煤口顶煤放出量的标准差(7.52 m2)高于自动放煤的标准差(1.93 m2)。
    Abstract: Currently, in the numerical simulation research on the release laws of top coal during fully mechanized mining, complex coupling algorithms are required to address the continuity-discontinuity issues of top coal movement and ensure precise interaction of coal-rock interface information. However, the conveying process of scraper conveyors is typically neglected in these simulations. To address this problem, a meshless numerical computation model was constructed based on smoothed particle hydrodynamics (SPH). The discrete equations of SPH, derived from the control equations of continuous medium mechanics, were established. An elastic-plastic soil constitutive model along with the Drucker-Prager yield criterion were introduced to achieve dynamic simulation of the caving, movement, and release processes of the top coal. Considering the actual coal release and conveying processes in the mining area, a scraper conveyor model was constructed to simulate the release of top coal and the conveying of bottom coal along the working face, obtaining the variations in coal-rock interface and coal flow velocity at different scraper conveyor operating speeds (0-1.5 m/s). The simulation results indicated that the elastic-plastic soil constitutive model effectively simulated the flow behavior of particles. By setting parameters such as friction angle and elastic modulus, the issue of uncertain parameters commonly found in traditional discrete element models was avoided. After stabilization of the coal flow velocity, the stress distribution of the top coal near the coal drawing outlet exhibited a "double peak" pattern. The operating speed of the scraper conveyor significantly impacted the coal drawing time, while its effect on the coal-rock interface at termination and the shape of the released body was minimal. When multiple supports released coal simultaneously, the conveying capacity of the scraper conveyor needed to be considered, as interference in bottom coal transportation between different supports could lead to blockage effects at the release port. The "gangue closing" rule resulted in variations in the amount of coal drawing at different coal drawing outlets, with the standard deviation of top coal drawing amount from 40 coal drawing outlets (7.52 m²) being greater than that of automatic coal drawing (1.93 m²).
  • 为保证煤矿井下作业的安全性,需对井下工作人员进行识别[1-2]。受技术上的限制和井下低光照、浮灰等环境影响,由同一类设备拍摄的单一源图像往往不能提供对整个场景的全面描述。因此,从不同的源图像中提取有效特征并融合,以提高人员识别精度。

    在图像融合领域,红外和可见光图像融合是应用最广泛的图像融合技术[3-5]。可见光图像包含丰富的纹理信息,更能适应视觉感知,但在低光照环境下,可见光会出现光照不均、对比度低等问题。红外图像可以在煤矿井下低光照或其他极其恶劣的环境中,通过获取灰度信息以突出重要目标。因此,红外和可见光图像融合不仅可以减少数据冗余,还可以产生对比度显著、纹理丰富和色彩保真的高质量图像。

    随着深度学习技术在计算机视觉方面的应用,基于深度学习的红外和可见光图像融合技术快速发展。文献[6]提出了基于卷积神经网络(Convolutional Neural Network,CNN)的红外和可见光融合方法,使用CNN从源图像生成权重图,使用拉普拉斯金字塔对源图像进行分解,使用高斯金字塔对权重映射图进行分解,并以多尺度方式进行融合。文献[7]提出了使用CNN进行特征提取和图像重建的无监督端到端红外和可见光融合网络,自适应融合红外信息和纹理信息,并在一定程度上抑制了噪声干扰;基于自编码器(Auto Encoder,AE)方法对可见光和红外图像进行预训练,使用训练后的编码器进行特征提取和图像重建。文献[8]提出了一种无暗度红外可见光图像融合方法,设计了一个场景−照明解缠网络 ,以去除夜间可见光图像中的照明退化特征,同时保留源图像的信息特征;设计纹理−对比度增强融合网络(Texture-Contrast Enhancement Fusion Network,TCEFNet)来整合互补信息并增强融合特征的对比度和纹理细节。文献[9]提出了一种基于AE的方法,采用附加策略和信道选择策略进行特征融合。文献[10]将生成对抗网络(Generative Adversarial Network,GAN)引入图像融合,提出了一种基于GAN的红外和可见光融合方法,通过设计生成器用于突出目标的融合图像,并设计鉴别器使得融合图像包含更多的纹理信息。文献[11]提出了新型红外与可见光图像融合方法,结合对称双向交互模块和Transformer网络,能够有效提升图像的局部与全局信息交互,改善了低光照环境下的图像质量。文献[12]利用Swin Transformer在图像融合中加强了长距离语义信息的提取,有效保留了图像边缘细节和全局信息,增强了融合效果。

    虽然上述融合方法可以有效整合来自可见光和红外图像的重要和互补信息,但仍有一些问题需要解决:① 现有方法都是针对正常光照条件设计的,忽略了夜间可见光图像中光照退化的困难。在弱光条件下,现有融合方法只使用红外信息来填补可见光图像光照退化造成的场景缺陷,导致在黑暗环境下可见光图像中丰富的场景信息无法在融合图像中表达出来。② 现有方法通常使用弱光增强算法对可见光图像进行预增强,并通过融合方法对源图像进行融合。然而,将图像增强和图像融合作为单独的任务来处理常常会带来不兼容的问题,从而导致融合结果较差。

    针对上述问题,本文提出一种基于低光照增强的红外和可见光图像融合模型,通过设计低光照增强网络和纹理−对比度增强融合网络,实现在低光照环境下生成具有高对比度和丰富纹理的融合图像,以解决井下低光照导致人员特征不明显的问题。构建可见光和红外双模态矿井人员数据集,在双模态矿井人员数据集上实现多模态融合,并在YOLOv8n检测网络上实现对矿井下人员识别,确保模型能够针对矿井低光照环境完成人员识别任务。

    D. J. Jobson等[13]首次使用单尺度Retinex原理,将低光照图像剥离照明亮度特征,调整反射率以增强图像细节。Retinex[14]在保留图像细节信息的前提下,抑制由于光照不均导致的图像质量退化。其在多个尺度上分离照明与反射成分,并融合各尺度的特征,以更好地兼顾细节提取和噪声抑制,能够在不同空间频率上有效处理图像,增强细节的同时避免过度增强噪声[15-17]

    在井下低光照环境下,可见光图像容易出现亮度不足、细节丢失等问题,直接影响融合效果。本文采用Retinex去除退化的照明特征,有效分离并剔除低质量的照明特征,仅保留具有判别力的反射率特征,有助于实现低光照增强。

    低光照增强网络由1个编码器、3个并行序列压缩块和3个并行解码器组成,如图1所示。其中,$ I_{{\mathrm{Vi}}}^{{Y}} $为Y通道的可见光图像,$ {I_{{\mathrm{ir}}}} $为红外图像,$ {\phi _{\mathrm{l}}} $为光照特征,$ \phi _{{\mathrm{Vi}}}^{{\mathrm{en}}} $为可见光特征,$ {\phi _{{\mathrm{ir}}}} $为红外特征,$ {D_{\mathrm{l}}} $为光照特征解码器,$ {D_{{\mathrm{vi}}}} $为可见光特征解码器,$ {D_{{\mathrm{ir}}}} $为红外特征解码器,$ w_{\mathrm{n}} $为权重。编码器包含4个卷积层,其核大小为3×3,激活函数为泄漏校正线性单元(LeakyReLU)。3个并行序列压缩块(SEBlocks)用于加强互补信息和消除退化照明,包括最大池化层、全连接层、LeakyReLU层和Sigmoid层。并行解码器由4个3×3卷积层组成。

    图  1  低光照增强网络结构
    Figure  1.  Structure of low light enhancement network

    纹理−对比度增强网络由边缘纹理增强模块和对比度增强模块组成。边缘纹理增强模块由1个主特征流和2个残差特征流组成,如图2所示。主流部署了2个常见的3×3卷积层,包括LeakyReLU激活函数和1个1×1卷积层。第1个残差流集成了索贝尔(Sobel)算子,以保留较强的特征纹理,并通过1×1卷积层消除通道尺寸的差异。第2个残差流采用了拉普拉斯算子,进一步提取弱纹理特征。将边缘纹理增强模块的输入和Sobel算子的输出进行对应特征相加,得到纹理增强的输出,然后和拉普拉斯算子的输出进行通道维度连接,得到增强后的特征输出$ {\phi _{\mathrm{g}}} $,以捕获更细节的深度特征。

    图  2  边缘纹理增强模块结构
    Figure  2.  Structure of edge texture enhancement module

    对比度增强模块主要由多尺度空洞卷积和对比度计算模块组成,如图3所示,其中$ {\phi _m} $为第$ m $层特征图的特征,${\phi _{\mathrm{f}}} $为经过网络处理后的特征。为了充分提取不同特征层次下的多尺度信息,避免因固定大小卷积核而受限,本文在对比度增强模块中引入了3种不同空洞率(r1=1,r2=2,r3=5)的空洞卷积。为了进一步减少特征提取过程中的信息损失,对比度增强模块采用连续卷积代替传统的池化操作,以保持特征图的分辨率。不同空洞率的空洞卷积提取的特征首先通过LeakyReLU激活函数进行非线性变换,然后在通道维度上进行拼接,形成融合后的多尺度特征表示,最后输入到对比度计算模块中。

    图  3  对比度增强模块结构
    Figure  3.  Structure of contrast enhancement module

    对比度计算模块主要负责在特征级别上自适应增强对比度信息。首先,计算输入特征中每个空间位置(ij)邻域的局部标准差,以估计局部区域内的对比度变化程度。然后,通过最大池化操作强化显著区域,并通过带有LeakyReLU激活函数的全连接层和带有Sigmoid激活函数的全连接层,生成一组通道权重向量。最后,残差特征流与主特征流通过逐通道加权融合,实现特征对比度的动态增强。

    将可见光和红外图像进行灰度化、几何校正等预处理操作,将处理后的图像传入低光照增强网络,在特征层面去除可见光图像的照度分量特征。经过纹理–对比度增强网络实现特征级融合,从纹理和对比度等方面增强整体的视觉感知。基于低光照增强的红外和可见光图像融合模型结构如图4所示,$I_{\mathrm{f}} $为经过处理后的图像。

    图  4  基于低光照增强的红外和可见光图像融合模型结构
    Figure  4.  Structure of infrared and visible light image fusion model based on low light enhancement

    首先,将红外图像和可见光图像在通道上连接,并输入到低光照增强网络的编码器,从而获得2个图像的混合特征$ \phi $。

    $$ \phi {\text{ = }}E\left( {I_{{\mathrm{Vi}}}^{{Y}},{I_{{\mathrm{ir}}}}} \right) $$ (1)

    式中$ E(·) $为编码器。

    其次,将具有2个图像信息的混合特征输入到3个自注意力模块中并有选择地加强特征,压缩不必要的特征。SEBlocks的目标是从混合特征中选择红外和可见光图像的特定特征。在特征层将可见光图像分解以得到红外特征$ {S_{{\mathrm{ir}}}}\left( \phi \right) $、退化光照特征$ {S_{\mathrm{l}}}\left( \phi \right) $和可见光特征$ S_{{\mathrm{Vi}}}^{{\mathrm{en}}}\left( \phi \right) $。将分离出来的3个特征输入到3个解码器中重建相应的图像,其中只选取红外特征和可见光特征。$ S_{{\mathrm{Vi}}}^{{\mathrm{en}}}\left( \phi \right) $和$ {S_{{\mathrm{ir}}}}\left( \phi \right) $被连接到同一个维度上,作为低光照增强网络的输出和后续纹理–对比度增强网络的输入。

    $$ {\phi _{\mathrm{s}}} = {\text{concat}}\left( {S_{{\mathrm{Vi}}}^{{\mathrm{en}}},{S_{{\mathrm{ir}}}}} \right) $$ (2)

    式中${\mathrm{concat}}(\cdot) $为通道维度上的拼接操作。

    然后,为了提高融合后图像的纹理信息,低光照增强网络的输出直接输入纹理增强网络,用来增强特征的表示,使用Sobel算子和拉普拉斯算子共同增强混合特征,得到纹理增强网络的输出特征$ {\phi _{\mathrm{g}}} $。

    $$ {\phi _{\mathrm{g}}} = {\text{concat}}\left( {{\text{conv}}\left( {{\phi _{\mathrm{s}}} \oplus {\nabla ^2}{\phi _{\mathrm{s}}}} \right),{\text{conv}}\left( {\nabla {\phi _{\mathrm{s}}}} \right)} \right) $$ (3)

    式中:$ {\text{conv}}\left( \cdot \right) $为卷积操作;$ \nabla $和$ {\nabla ^2} $分别为Sobel 算子和拉普拉斯算子。

    对比度增强网络采用空洞率不同的空洞卷积来增大感受野,用于获取多尺度信息,通过对比度计算模块为对比度高的特征分配更高的权重,实现对比度增强,最终得到纹理−对比度增强网络输出$ {\phi _{\mathrm{f}}} $。

    $$ {\phi _m} = {\text{concat}}\left( {{\text{con}}{{\text{v}}_{n \times n}}\left( {{\phi _{\mathrm{g}}}} \right)} \right) $$ (4)
    $$ {\phi _{\mathrm{f}}} = {\phi _m} {{\boldsymbol{V}}_{\mathrm{c}}} $$ (5)

    式中:$ n \times n $为卷积核大小;$ {{\boldsymbol{V}}_{\mathrm{c}}} $为激活向量。

    融合图像只注重亮度增强的图像融合,导致增强后的图像$ I_{\mathrm{f}}^Y $具有严重的颜色失真。将初始融合图像的颜色空间转换为RGB空间,与原始可见光图像的通道$ {C_{\mathrm{b}}} $和$ {C_{\mathrm{r}}} $相匹配,确保消除颜色失真的同时保持场景亮度。

    $$ {I_{\mathrm{f}}} = \xi \left( {{\text{concat}}\left( {I_{\mathrm{f}}^Y,I_{{\mathrm{Vi}}}^{{C_{\mathrm{b}}}},I_{{\mathrm{Vi}}}^{{C_{\mathrm{r}}}}} \right)} \right) $$ (6)

    式中:$ \xi \left( \cdot \right) $为将图像从原始图像颜色空间转换为RGB空间的传输矩阵;$ I_{{\mathrm{Vi}}}^{{C_{\mathrm{b}}}} $和$ I_{{\mathrm{Vi}}}^{{C_{\mathrm{r}}}} $为通道$ {C_{\mathrm{b}}} $和$ {C_{\mathrm{r}}} $的原始可见光图像。

    为验证本文模型在低光照条件下的有效性,选用公开的低光照可见光红外配对(Low-Light Visible-Infrared Paired,LLVIP)数据集和自建的双模态矿井人员数据集进行实验。LLVIP数据集由双目摄像系统采集,图像经过严格配准与裁剪,分辨率为 640×480。拍摄环境多为极暗场景,具备光照复杂、噪声干扰、目标遮挡等特点,适用于低光照条件下的图像融合与目标检测研究。本文从中选取 600 对图像用于训练,并通过裁剪、旋转等数据增强方法验证模型泛化能力。

    基于 PyTorch 深度学习框架,采用 Python 3.9 作为编程语言,结合 OpenCV,NumPy,Matplotlib 等进行数据处理、图像预处理与结果可视化。实验环境:CPU为AMD Ryzen 7 5800 H,CPU频率为3.20 GHz,GPU为NVIDIA GeForce GTX3070,显存为6 GiB,内存为16 GiB。软件配置见表1

    表  1  软件配置
    Table  1.  Software configuration
    版本 版本
    Python 3.9 OpenCV 4.7
    Pytorch 1.13 NumPy 1.23
    TorchVision 0.14 Matplotlib 3.7
    CUDA 11.7 SciPy 1.10
    下载: 导出CSV 
    | 显示表格

    为了说明本文所提模型的优点,在 LLVIP 数据集上将其与主流融合模型Densefuse[18],SeAFusion[19]和CCDFusion[20]进行了对比实验,可视化结果如图5所示。可看出Densefuse和SeAFusion融合后拥有更多的对比度,但整个场景缺少更多的纹理信息。CCDFusion虽然具有一定的纹理信息,但缺少源图像的颜色信息。本文所提模型即使在黑暗中也能获得丰富的场景、纹理和对比度,为后续人员识别奠定数据基础。

    图  5  各融合模型在LLVIP数据集上的可视化结果
    Figure  5.  Visualization results of each fusion model on the LLVIP dataset

    为进一步验证本文模型的优越性,从LLVIP数据集中选择50对图像,选取熵(Entropy,EN)、标准偏差(Standard Deviation,SD)、空间频率(Spatial Frequency,SF)、互信息(Mutual Information,MI)、差异相关性之和(Sum of Correlations of Differences,SCD)、视觉信息保真度(Visual Information Fidelity,VIF)[21]、$ {\text{Q}}^{\text{AB/F}} $、结构相似性指数(Structural Similarity Index Measure,SSIM)[22]8个指标作为评价指标,进行了融合结果的定量对比,结果见表2。EN用于衡量融合图像的信息量;SD反映图像灰度值的离散程度,值越大则图像清晰度更高;SF用于评价图像灰度变化的速率;MI用于衡量融合图像与源图像间的信息共享程度;SCD用于评估融合图像与源图像之间细节和结构的保持程度;VIF基于人眼视觉系统评价图像的视觉保真度,值越大表明视觉效果越优;$ {\text{Q}}^{\text{AB/F}} $值越高表示融合图像在保持源图像信息的同时也具备较好的视觉效果;SSIM综合考虑亮度、对比度和结构信息,用于评估图像的结构一致性。

    表  2  不同模型各指标对比
    Table  2.  Comparison of various indicators of different models
    模型 EN SD SF MI SCD VIF $ {{\text{Q}}^{{\text{AB/F}}}} $ SSIM
    Densefuse 6.93 45.49 8.21 1.78 1.27 0.91 0.41 0.96
    SeAFusion 7.57 46.44 11.15 2.69 1.57 1.14 0.50 0.64
    CDDFusion 7.18 44.96 13.28 3.12 1.55 0.94 0.62 0.94
    本文模型 7.59 49.68 16.36 3.45 1.69 1.10 0.69 1.03
    下载: 导出CSV 
    | 显示表格

    表2可看出,本文模型在7个指标上表现最好:EN最优,表明融合图像中蕴含的信息量丰富,融合算法的性能表现出色;SD最优,表明融合图像具有更丰富的对比度信息,与可视化结果一致;在SF度量的指标最优,表明融合图像具有更多的细节和纹理信息;MI最优,表明越多的信息从源图像传输到融合图像,具有良好的融合性能;SCD最优,表明融合后的结果包含了更多的真实信息;$ {\text{Q}}^{\text{AB/F}} $最优,表明有更多源图像的边缘信息被保留到融合图像;SSIM最优,表明源图像和融合图像之间的结构相似性最大。本文模型VIF略低于SeAFusion,因为VIF是用于衡量源图像与融合图像之间的信息保真程度,但本文模型通过低光照增强实现融合后的高对比度,所以在源图像与融合图像中存在一定的失真,但融合后的场景更加明亮,人员特征细节更突出,更有利于后续的人员识别任务。

    为了验证融合图像在不同检测网络中的效果,本文在Faster−RCNN,YOLOv5和YOLOv8n检测网络分别对可见光、红外和融合图像进行对比,可视化结果如图6所示。其中Faster−RCNN以ResNet−50为主干网络,并有5个特征金字塔网络(Feature Pyramid Networks,FPN)特征层进行特征融合。 YOLOv8n以CSPDarknet为主干网络,结合自适应特征池化进行特征提取,并通过路径聚合特征金字塔网络(Path Aggregation Feature Pyramid Network,PAFPN)结构进行多尺度特征融合,PAFPN特征融合层包括多个上采样和下采样操作,以充分整合不同尺度的特征信息,增强对小目标的检测能力。

    图  6  不同检测网络下人员识别效果对比
    Figure  6.  Comparison of personnel recognition effects in different detection networks

    图6可看出,若处于低光照环境下,可见光图像中由于人员特征不明显,出现置信度低甚至无法检测的情况;而红外图像虽然解决了特征不明显的问题,但会出现特征不突出导致错检的情况;融合图像在不同检测网络中均解决了单模态所存在的问题,实现了良好的检测效果。说明本文模型具有一定的优越性,也验证了先融合后检测可以解决由低光照引起的问题,为后续井下人员识别奠定基础。

    为确保实验的全面性,在西安科技大学煤炭主体专业综合实验实训中心的井下模拟区域模拟井下低光照环境,使用海康微视GQ35L拍摄RGB图像和红外图像双对准视频,自建一个双模态矿井人员数据集,包含1 368对红外和可见光图像,涵盖矿井走道、矿井大厅、设备周围等典型低光照场景。数据集通过同步拍摄高分辨率红外与可见光图像,保证空间和时间的一致性,并经过人工标注,确保目标位置与标签的准确性。通过这种多场景、多条件下的数据收集,数据集为低光照环境下人员识别提供了有力支持,确保模型能够在实际应用中具有较强的泛化能力和鲁棒性。

    本文提出的基于低光照增强的红外和可见光图像融合模型在自建双模态矿井人员数据集上人员识别结果见表3。可看出基于低光照增强的红外和可见光图像融合较可见光图像准确率平均提高了8.2%,召回率提高了12.5%,mAP@0.5提高了8.3%,较红外图像准确率平均提高了2.1%,召回率提高了5.1%,mAP@0.5提高了4.1%,同时可见光图像和红外图像检测速度分别达46.7和53.4 帧/s,虽然融合模型的检测速度为31.2 帧/s,较可见光图像和红外图像有一定下降,但同样满足井下人员识别实时性基本要求。

    表  3  不同图像在矿井双模态人员数据集上的人员识别结果
    Table  3.  The personnel recognition results of different images on the mine bi-modal personnel data set
    输入图像 准确率/% 召回率/% mAP@0.5/% 帧速率/(帧·s−1
    可见光 85.5 79.1 86.1 46.7
    红外 91.6 86.5 90.3 53.4
    融合 93.7 91.6 94.4 31.2
    下载: 导出CSV 
    | 显示表格

    不同融合模型在矿井双模态人员数据集上通过YOLOv8n检测网络的人员识别结果见表4。可看出本文模型在准确率、召回率、mAP@0.5和帧速率等指标上均表现最佳。SeAFusion和Densefuse在准确率和召回率上稍显逊色,导致漏检或假阳性现象。而CDDFusion因为其双分支特征分解方法在低光照环境下无法有效捕捉到红外和可见光图像的关键信息,准确率和召回率明显低于其他模型。

    表  4  不同融合模型在矿井双模态人员数据集上的人员识别结果
    Table  4.  Personnel recognition results of different fusion models on the underground personnel data set
    模型 准确率/% 召回率/% mAP@0.5/% 帧速率/(帧·s−1
    Densefuse 89.5 80.9 88.2 30.1
    SeAFusion 90.6 88.6 91.3 30.5
    CDDFusion 83.5 79.6 82.6 29.8
    本文模型 93.7 91.6 94.4 31.2
    下载: 导出CSV 
    | 显示表格

    为了验证本文所提模型的有效性,通过自建的双模态矿井人员数据集进行多模态融合,人员识别可视化结果如图7所示。可看出由于井下低光照导致人员特征不明显,在YOLOv8n检测网络中,可见光图像均出现漏检和置信度低的问题;红外图像虽然解决了人员特征不明显的问题,但画面缺少纹理和对比度信息,在矿井这类复杂场景下,无法及时发现场景细节信息;而将可见光和红外图像融合后,不仅解决了可见光人员特征不明显的问题,还保留了更多场景信息。

    图  7  不同图像下人员识别可视化
    Figure  7.  Visualization of personnel identification in different modalities

    1) 为解决煤矿井下低光照问题,提出了一种基于低光照增强的红外和可见光图像融合的井下人员识别模型,通过增强网络提升了图像的对比度和纹理,有效减少了红外和可见光图像融合不兼容问题,解决了由低光照导致的人员错检、漏检等问题。

    2) 在双模态矿井人员数据集上实现多模态融合,并在YOLOv8n检测网络上实现了对人员的精准识别,与可见光图像相比,融合图像人员识别准确率平均提高了8.2%,召回率提高了12.5%,mAP@0.5提高了8.3%,检测速度达31.2 帧/s,有效实现了低光照环境下矿井人员识别,并满足煤矿井下人员识别需求。

  • 图  1   SPH计算域离散化及粒子支持域

    Figure  1.   Smoothed particle hydrodynamics (SPH) computational domain discretisation and particle support domains

    图  2   D−P屈服准则和应力调整

    Figure  2.   Drucker-Prager (D−P) criterion and stress adjustment

    图  3   铝颗粒床在重力作用下坍塌过程的模拟和实验结果对比

    Figure  3.   Comparison between simulation and experiment results of aluminum particle bed collapse process under influence of gravity

    图  4   单个放煤口放煤SPH模型

    Figure  4.   SPH model of top coal caving with a single coal drawing outlet

    图  5   放煤终止时的煤岩界面及放出体形状

    Figure  5.   Coal-rock interface and shape of released body at the end of coal caving

    图  6   不同放煤时刻标记颗粒的位置

    Figure  6.   The positions of marked particles at different coal drawing times

    图  7   顶煤的运动轨迹和放出体轮廓

    Figure  7.   Top coal movement trajectory and released body profile

    图  8   顶煤放出和底煤输送过程的SPH模拟结果($ {V}_{{\mathrm{c}}}=1.0 $ m/s)

    Figure  8.   SPH simulation results of top coal drawing and bottom coal conveying process ($ {V}_{{\mathrm{c}}}=1.0 $ m/s)

    图  9   放煤口监测的煤流速度−时间曲线

    Figure  9.   Coal flow velocity-time curve monitored at the coal drawing outlet

    图  10   不同刮板输送机运行速度下煤岩界面和底煤输送距离(t=9.0 s)

    Figure  10.   Coal-rock interface and bottom coal conveying distance at different scraper conveyor operating speeds (t=9.0 s)

    图  11   不同时刻刮板输送机运行速度对煤岩界面形貌的影响

    Figure  11.   The impact of scraper conveyor speed at different times on the morphology of coal-rock interface

    图  12   2个放煤口同时放煤时的模拟结果(t=11.4 s)

    Figure  12.   Simulation results of coal being released simultaneously from two coal outlets (t=11.4 s)

    图  13   放煤口煤流速度曲线

    Figure  13.   Coal flow velocity curves at coal drawing outlets

    图  14   不同放煤技术下每个放煤口的顶煤放出量

    Figure  14.   Amount of top coal drawing from each coal drawing outlets under different coal drawing techniques

    表  1   SPH模型参数设定

    Table  1   Parameters seting in SPH model

    参数 取值 参数 取值
    初始粒子间距
    $ {d}_{{\mathrm{ini}}} $/m
    取决于具体算例 声速$ {s} $/(m·s−1) $ \mathrm{ }s=\sqrt{\dfrac{K}{\rho}} $
    光滑长度$ {h}_{i} $/m $ h_i=1.2d_{\mathrm{ini}} $ 人工黏性力系数
    $ {\mathrm{\alpha }}_{\mathrm{\Pi }},\;{\mathrm{\beta }}_{\mathrm{\Pi }} $
    $ {\mathrm{\alpha }}_{\mathrm{\Pi }}=0.1,{\mathrm{\beta }}_{\mathrm{\Pi }}=0.1 $
    时间步长$ \Delta t $/s $ \Delta t\leqslant C_{\mathrm{cour}}\left(\dfrac{h_i}{s}\right) $
    下载: 导出CSV

    表  2   铝颗粒崩塌模拟采用的材料参数

    Table  2   Material parameters used for aluminum particle collapse simulations

    参数 数值 参数 数值
    密度$ \rho $/(kg·m3) 2 004.0 弹性模量$ E $/MPa 5.84
    摩擦角$ \phi $/(°) 21.9 泊松比$ \upsilon $ 0.3
    黏聚力$ C $/Pa 0
    下载: 导出CSV
  • [1]

    YANG Shengli,ZHANG Jinwang,CHEN Yi,et al. Effect of upward angle on the drawing mechanism in longwall top-coal caving mining[J]. International Journal of Rock Mechanics and Mining Sciences,2016,85:92-101. DOI: 10.1016/j.ijrmms.2016.03.004

    [2] 王家臣. 我国放顶煤开采的工程实践与理论进展[J]. 煤炭学报,2018,43(1):43-51.

    WANG Jiachen. Engineering practice and theoretical progress of top-coal caving mining technology in China[J]. Journal of China Coal Society,2018,43(1):43-51.

    [3] 王国法,庞义辉,马英. 特厚煤层大采高综放自动化开采技术与装备[J]. 煤炭工程,2018,50(1):1-6.

    WANG Guofa,PANG Yihui,MA Ying. Automated mining technology and equipment for fully-mechanized caving mining with large mining height in extra-thick coal seam[J]. Coal Engineering,2018,50(1):1-6.

    [4] 王国法,范京道,徐亚军,等. 煤炭智能化开采关键技术创新进展与展望[J]. 工矿自动化,2018,44(2):5-12.

    WANG Guofa,FAN Jingdao,XU Yajun,et al. Innovation progress and prospect on key technologies of intelligent coal mining[J]. Industry and Mine Automation,2018,44(2):5-12.

    [5] 王家臣,富强. 低位综放开采顶煤放出的散体介质流理论与应用[J]. 煤炭学报,2002,27(4):337-341. DOI: 10.3321/j.issn:0253-9993.2002.04.001

    WANG Jiachen,FU Qiang. The loose medium flow field theory and its application on the longwall top-coal caving[J]. Journal of China Coal Society,2002,27(4):337-341. DOI: 10.3321/j.issn:0253-9993.2002.04.001

    [6] 王家臣,杨建立,刘颢颢,等. 顶煤放出散体介质流理论的现场观测研究[J]. 煤炭学报,2010,35(3):353-356.

    WANG Jiachen,YANG Jianli,LIU haohao,et al. The practical observation research on loose medium flow field theory on the top-coal caving[J]. Journal of China Coal Society,2010,35(3):353-356.

    [7] 许永祥,王国法,李明忠,等. 特厚坚硬煤层超大采高综放开采支架−围岩结构耦合关系[J]. 煤炭学报,2019,44(6):1666-1678.

    XU Yongxiang,WANG Guofa,LI Mingzhong,et al. Structure coupling between hydraulic roof support and surrounding rock in extra-thick and hard coal seam with super large cutting height and longwall top coal caving operation[J]. Journal of China Coal Society,2019,44(6):1666-1678.

    [8] 张宁波,刘长友,陈玉明. 不稳定厚煤层放顶煤开采煤矸流场规律的数值模拟研究[J]. 煤炭技术,2014,33(12):1-4.

    ZHANG Ningbo,LIU Changyou,CHEN Yuming. Study on coal and gangue flow rule of top-coal caving with erratic hick coal seam by PFC2D[J]. Coal Technology,2014,33(12):1-4.

    [9] 王家臣,张锦旺,杨胜利,等. 多夹矸近水平煤层综放开采顶煤三维放出规律[J]. 煤炭学报,2015,40(5):979-987.

    WANG Jiachen,ZHANG Jinwang,YANG Shengli,et al. 3-D movement law of top-coal in near horizontal coal seam with multi-gangue under caving mining technique[J]. Journal of China Coal Society,2015,40(5):979-987.

    [10] 孙强,单成方,李亚锋,等. 浅埋双硬特厚煤层放煤规律分析及参数研究[J]. 工矿自动化,2022,48(2):61-69.

    SUN Qiang,SHAN Chengfang,LI Yafeng,et al. Analysis of coal drawing law and parameter research in shallow buried double hard and extra-thick coal seam[J]. Industry and Mine Automation,2022,48(2):61-69.

    [11] 何欣,刘长友,吴锋锋,等. 仰斜综放开采煤层仰角对顶煤放出规律的影响研究[J]. 煤炭科学技术,2021,49(9):25-31.

    HE Xin,LIU Changyou,WU Fengfeng,et al. Effect of elevation angle of coal seam on top-coal caving law in fully-mechanized top-coal caving mining face during topple mining[J]. Coal Science and Technology,2021,49(9):25-31.

    [12] 张锦旺,王家臣,魏炜杰. 工作面倾角对综放开采散体顶煤放出规律的影响[J]. 中国矿业大学学报,2018,47(4):805-814.

    ZHANG Jinwang,WANG Jiachen,WEI Weijie. Effect of face dip angle on the drawing mechanism in longwall top-coal caving mining[J]. Journal of China University of Mining & Technology,2018,47(4):805-814.

    [13] 冯宇峰. 综放开采含硬夹矸顶煤破碎机理及控制技术研究[J]. 煤炭科学技术,2020,48(3):133-139.

    FENG Yufeng. Research on top-coal caving mechanism and control technology in extra-thick coal seam with hard dirt band[J]. Coal Science and Technology,2020,48(3):133-139.

    [14] 邹光华,杨健男,关书方,等. 倾斜放煤口上下侧煤岩分界线方程表征及其模拟[J/OL]. 煤炭科学技术,1-13[2024-05-26]. http://kns.cnki.net/kcms/detail/11.2402.TD.20240227.1432.003.html.

    ZOU Guanghua,YANG Jiannan,GUAN Shufang,et al. Characterization and simulation of the coal-rock boundary equation on the upper and lower sides of the inclined coal caving opening[J/OL]. Coal Science and Technology, 1-13[2024-05-26]. http://kns.cnki.net/kcms/detail/11.2402.TD.20240227.1432.003.html.

    [15] 姜志刚,关书方,王明强,等. 大倾角综放面煤岩分界线不对称分布特征及放煤工艺优化[J]. 煤炭技术,2023,42(12):104-108.

    JIANG Zhigang,GUAN Shufang,WANG Mingqiang,et al. Asymmetric distribution characteristics of coal-rock boundary and optimization of coal caving technology in fully mechanized caving face with large dip angle[J]. Coal Technology,2023,42(12):104-108.

    [16]

    WANG Shuai,ZHANG Chunhua,HE Feng,et al. Numerical modelling of loose top coal and roof mass movement for a re-mined seam using the top coal caving method[J]. PLoS One,2023,18(4). DOI: 10.1371/JOURNAL.PONE.0283883.

    [17]

    LIU Yang,WANG Jiachen,YANG Shengli,et al. Improving the top coal recovery ratio in longwall top coal caving mining using drawing balance analysis[J]. International Journal of Mining,Reclamation and Environment,2023,37(5):319-337. DOI: 10.1080/17480930.2023.2184036

    [18]

    WEI Weijie,YANG Shengli,LI Meng,et al. Motion mechanisms for top coal and gangue blocks in longwall top coal caving (LTCC) with an extra-thick seam[J]. Rock Mechanics and Rock Engineering,2022,55(8):5107-5121. DOI: 10.1007/s00603-022-02928-2

    [19] 张文辉,李东印,王伸,等. 特厚煤层顶煤渐进破坏的块体−颗粒耦合模拟研究[J]. 河南理工大学学报(自然科学版),2022,41(6):24-35.

    ZHANG Wenhui,LI Dongyin,WANG Shen,et al. Study on block-particle coupling approach for modeling progressive failure of top coal in extra thick coal seams[J]. Journal of Henan Polytechnic University (Natural Science),2022,41(6):24-35.

    [20]

    ZHANG Qunlei,YUE Jinchao,LIU Chuang,et al. Study of automated top-coal caving in extra-thick coal seams using the continuum-discontinuum element method[J]. International Journal of Rock Mechanics and Mining Sciences,2019,122. DOI: 10.1016/j.ijrmms.2019.04.019.

    [21] 李东印,王耀闯,王伸,等. 特厚煤层综放开采顶煤遗失机理及放煤步距优化数值模拟研究[J]. 河南理工大学学报(自然科学版),2023,42(2):1-10.

    LI Dongyin,WANG Yaochuang,WANG Shen,et al. Numerical simulation study of top-coal loss mechanism and reasonable cycle step length for extra-thick coal seam top-coal drawing[J]. Journal of Henan Polytechnic University (Natural Science),2023,42(2):1-10.

    [22] 刘闯,李化敏,马占元,等. 不同煤厚综放工作面合理放煤工艺数值模拟研究[J]. 河南理工大学学报(自然科学版),2023,42(4):40-46.

    LIU Chuang,LI Huamin,MA Zhanyuan,et al. Numerical simulation study on reasonable top coal caving technology in longwall top coal caving working face with different top coal thickness[J]. Journal of Henan Polytechnic University (Natural Science),2023,42(4):40-46.

    [23] 董祥伟. 无网格弱可压缩SPH数值算法及应用扩展[M]. 北京:科学出版社,2021.

    DONG Xiangwei. Extension of meshless weakly compressible SPH numerical algorithms and applications[M]. Beijing:Science Publishing House,2021.

    [24] 张伟, 晏飞, 王兆丰, 等. 基于物质点和深度积分耦合模型的滑坡数值分析[J]. 岩土力学,2024,45(8):2515-2526.

    ZHANG Wei,YAN Fei,WANG Zhaofeng,et al. Numerical analysis oflandslides based on coupling modelof material point method and depth integral[J]. Rock and Soil Mechanics,2024,45(8):2515-2526.

    [25]

    FENG Ruofeng,FOURTAKAS G,ROGERS B D,et al. Large deformation analysis of granular materials with stabilized and noise-free stress treatment in smoothed particle hydrodynamics (SPH)[J]. Computers and Geotechnics,2021,138. DOI: 10.1016/J.COMPGEO.2021.104356.

    [26] 胡嫚,谢谟文,王立伟. 基于弹塑性土体本构模型的滑坡运动过程SPH模拟[J]. 岩土工程学报,2016,38(1):58-67.

    HU Man,XIE Mowen,WANG Liwei. SPH simulations of post-failure flow of landslides using elastic-plastic soil constitutive model[J]. Chinese Journal of Geotechnical Engineering,2016,38(1):58-67.

    [27]

    NGUYEN N H T,BUI H H,NGUYEN G D. Effects of material properties on the mobility of granular flow[J]. Granular Matter,2020,22(3). DOI: 10.1007/s10035-020-01024-y.

    [28] 高涛,谢守勇,胡嫚,等. 基于亚塑性本构模型的土壤−触土部件SPH互作模型[J]. 农业工程学报,2022,38(13):47-55.

    GAO Tao,XIE Shouyong,HU Man,et al. Soil-soil engaging component SPH model based on a hypoplastic constitutive model[J]. Transactions of the Chinese Society of Agricultural Engineering,2022,38(13):47-55.

图(14)  /  表(2)
计量
  • 文章访问数:  301
  • HTML全文浏览量:  27
  • PDF下载量:  29
  • 被引次数: 0
出版历程
  • 收稿日期:  2024-06-01
  • 修回日期:  2024-09-11
  • 网络出版日期:  2024-08-01
  • 刊出日期:  2024-08-31

目录

/

返回文章
返回