轻量化姿态估计时空增强图卷积模型下的矿工行为识别

王建芳, 段思源, 潘红光, 景宁波

王建芳,段思源,潘红光,等. 轻量化姿态估计时空增强图卷积模型下的矿工行为识别[J]. 工矿自动化,2024,50(11):34-42. DOI: 10.13272/j.issn.1671-251x.2024090059
引用本文: 王建芳,段思源,潘红光,等. 轻量化姿态估计时空增强图卷积模型下的矿工行为识别[J]. 工矿自动化,2024,50(11):34-42. DOI: 10.13272/j.issn.1671-251x.2024090059
WANG Jianfang, DUAN Siyuan, PAN Hongguang, et al. Lightweight pose estimation spatial-temporal enhanced graph convolutional model for miner behavior recognition[J]. Journal of Mine Automation,2024,50(11):34-42. DOI: 10.13272/j.issn.1671-251x.2024090059
Citation: WANG Jianfang, DUAN Siyuan, PAN Hongguang, et al. Lightweight pose estimation spatial-temporal enhanced graph convolutional model for miner behavior recognition[J]. Journal of Mine Automation,2024,50(11):34-42. DOI: 10.13272/j.issn.1671-251x.2024090059

轻量化姿态估计时空增强图卷积模型下的矿工行为识别

基金项目: 国家自然科学基金项目(51804249)。
详细信息
    作者简介:

    王建芳(1975—),男,陕西渭南人,高级工程师,硕士,主要从事智能矿山等方面研究工作,E-mail:1194699440@qq.com

    通讯作者:

    景宁波(1984—),男,山西永济人,工程师,博士,主要从事智慧矿山、煤矿机器人方面的教学和科研工作,E-mail: nbjing@xust.edu.cn

  • 中图分类号: TD67

Lightweight pose estimation spatial-temporal enhanced graph convolutional model for miner behavior recognition

  • 摘要:

    基于骨架序列的行为识别模型具有速度快、算力要求低、模型简单等特点,图卷积神经网络在处理骨架序列数据时具有优势,而现有基于图卷积的矿工行为识别模型在高精度和低计算复杂度之间难以兼顾。针对该问题,提出了一种基于轻量化姿态估计网络(Lite−HRNet)和多维特征增强时空图卷积网络(MEST−GCN)的矿工行为识别模型。Lite−HRNet通过目标检测器进行人体检测,利用卷积神经网络提取图像特征,并通过区域提议网络生成锚框,对每个锚框进行分类以判断是否包含目标;区域提议网络对被判定为目标的锚框进行边界框回归,输出人体边界框,并通过非极大值抑制筛选出最优检测结果;将每个检测到的人体区域裁剪出来并输入到Lite−HRNet,生成人体关键点骨架序列。MEST−GCN在时空图卷积神经网络(ST−GCN)的基础上进行改进:去除ST−GCN中的冗余层以简化模型结构,减少模型参数量;引入多维特征融合注意力模块M2FA。生成的骨架序列经MEST−GCN的BN层批量标准化处理后,由多维特征增强图卷积模块提取矿工行为特征,经全局平均池化层和Softmax层得到行为的置信度,获得矿工行为预测结果。实验结果表明:① MEST−GCN的参数量降低至1.87 Mib;② 在以交叉主体和交叉视角为评价标准的公开数据集NTU60上,采用Lite−HRNet提取2D人体关键点坐标,基于Lite−HRNet和MEST−GCN的矿工行为识别模型的准确率分别达88.0%和92.6%;③ 在构建的矿工行为数据集上,基于Lite−HRNet和MEST−GCN的矿工行为识别模型的准确率达88.5%,视频处理速度达18.26 帧/s,可以准确且快速地识别矿工的动作类别。

    Abstract:

    Skeleton-sequence-based behavior recognition models are characterized by fast processing speeds, low computational requirements, and simple structures. Graph convolutional networks (GCNs) have advantages in processing skeleton sequence data. However, existing miner behavior recognition models based on graph convolution struggle to balance high accuracy and low computational complexity. To address this issue, this study proposed a miner behavior recognition model based on a lightweight pose estimation network (Lite-HRNet) and a multi-dimensional feature-enhanced spatial-temporal graph convolutional network (MEST-GCN). Lite-HRNet performed human detection using a target detector, extracted image features through a convolutional neural network (CNN), and generated anchor boxes via a region proposal network (RPN). These anchor boxes were classified to determine whether they contain a target. The RPN applied bounding box regression to the anchor boxes identified as containing targets and outputted the human bounding box, with the optimal detection result selected via non-maximum suppression. The detected human regions were cropped and inputted into Lite-HRNet to generate skeleton sequences based on human pose keypoints. MEST-GCN improved upon the spatial-temporal graph convolutional network (ST-GCN) by removing redundant layers to simplify the model structure and reduce the number of parameters. It also introduced a multi-dimensional feature fusion attention module (M2FA). The generated skeleton sequences were processed by the BN layer for batch normalization, and the miner behavior features were extracted through the multi-dimensional feature-enhanced graph convolution module. These features were passed through global average pooling and a Softmax layer to obtain the behavior confidence, providing the miner behavior prediction results. Experimental results showed that: ① The parameter count of MEST-GCN was reduced to 1.87 Mib. ② On the public NTU60 dataset, evaluated using cross subject and cross view standards, the accuracy of the miner behavior recognition model based on Lite-HRNet and MEST-GCN reached 88.0% and 92.6%, respectively, with Lite-HRNet extracting 2D human keypoint coordinates. ③ On a custom-built miner behavior dataset, the model based on Lite-HRNet and MEST-GCN achieved an accuracy of 88.5% and a video processing speed of 18.26 frames per second, accurately and quickly identifying miner action categories.

  • 在巷道掘进过程中,掘进机破碎煤壁会产生大量粉尘[1-4]。粉尘在巷道内逸散,增加了矿工患呼吸道疾病的风险,飞扬的粉尘还可能引发矿尘爆炸[5-8],严重危害井下人员的生命安全。提升掘进工作面的粉尘治理水平、消除粉尘职业危害隐患成为众多学者研究的重点。杜永星[9]通过数值模拟及现场试验,研制了一种新型液压支架风力负压喷雾降尘装置和采煤机湿式喷雾降尘器。张凯等[10]采用Fluent软件中的DPM(Discrete Phase Model,离散相模型)对工作面内的空气和粉尘流动进行数值模拟,得到了抽出式通风方式下粉尘整体浓度和扩散范围较低的最佳设置条件。Guo Lidian等[11]将数值模拟与现场测量相结合,研究了单压入通风条件下隧道内粉尘扩散的时空演化规律。陈云等[12]改进了粉尘治理装备——雾炮机,在保证降尘效果的同时,降低了雾炮机噪声。魏星等[13]利用Fluent软件分析了安设气幕发生装置前后综掘工作面受限空间内流场变化情况,得到了多向旋流气幕对控尘流场的影响规律。张恒[14]以陕煤集团铜川矿业公司玉华矿为工程背景,根据掘进工艺,选取5个具有代表性的尘源点进行仿真模拟,结合现场实测,得出压抽混合式通风策略降尘效果更好,且风筒距掘进工作面13 m时降尘效果最佳。

    上述学者通过数值模拟、现场试验和相似性试验等手段对降尘方法进行了大量研究,但大多针对单一种类的降尘技术,且传统的通风降尘效率低。笔者所在团队基于陕西延长石油巴拉素煤业有限公司(简称巴拉素煤矿)综掘工作面实际情况,提出了气室降尘的新思路。马文杰[15]结合长压短抽通风降尘与风幕降尘的优点,对正压风筒进行适当改造,通过加装直径相同的风袖设计了气室降尘技术,弥补了长压短抽通风降尘技术粉尘扩散区域大、风幕降尘技术射流孔易堵塞等缺点,提高了综掘工作面降尘效果。

    本文从尘粒运动的角度来论证气室降尘技术的有效性。根据综掘工作面粉尘颗粒受力状态建立其运动数学模型,得出降尘的关键因素是控制掘进巷道内风流场扰动范围及降低粉尘颗粒运动时间;建立仿真模型,对气室降尘技术参数进行优化;在巴拉素煤矿综掘工作面进行现场试验,验证了气室降尘技术较传统降尘技术更有效。

    掘进巷道内粉尘颗粒在气体阻力作用下做加速运动,直到粉尘扩散速度与掘进巷道水平方向空气流速相同时加速度为0[16]。其他外力对粉尘颗粒扩散运动的影响较小,可忽略不计。因此,结合牛顿第二定律可得[17]

    $$ \frac{{\text{π}} }{6}d_{\mathrm{s}}^3{\rho _{\mathrm{s}}}\frac{{{\mathrm{d}}{v_{{\mathrm{sx}}}}}}{{{\mathrm{d}}t}}{\text{ = }}\frac{1}{8}{C_{\mathrm{d}}}{\rho _{\mathrm{g}}}{\left( {{v_{{\mathrm{gx}}}} - {v_{{\mathrm{sx}}}}} \right)^2}{\text{π}} {d_{\mathrm{s}}}^2 $$ (1)

    式中:$ {d_{\mathrm{s}}} $为球形粉尘颗粒直径,mm;$ {\rho _{\mathrm{s}}} $为球形粉尘颗粒密度,kg/m3;$ {v_{{\mathrm{sx}}}} $为球形粉尘颗粒扩散速度,m/s;t为时间,s;${C_{\text{d}}}$为气体阻力系数;$ {\rho _{\mathrm{g}}} $为巷道内空气密度,kg/m3;$ {v_{{\mathrm{gx}}}} $为巷道内水平方向空气流速,m/s。

    化简式(1)可得

    $$ \frac{{{\mathrm{d}}{v_{{\mathrm{sx}}}}}}{{{\mathrm{d}}t}}{\text{ = }}\frac{{3{\rho _{\mathrm{g}}}}}{{4{d_{\text{s}}}{\rho _{\mathrm{s}}}}}{C_{\mathrm{d}}}{\left( {{v_{{\mathrm{gx}}}} - {v_{{\mathrm{sx}}}}} \right)^2} $$ (2)
    $$ \frac{{{\mathrm{d}}{v_{{\mathrm{sx}}}}}}{{{{\left( {{v_{{\mathrm{gx}}}} - {v_{{\mathrm{sx}}}}} \right)}^2}}}{\text{ = }}\frac{{3{\rho _{\mathrm{g}}}}}{{4{d_{\text{s}}}{\rho _{\mathrm{s}}}}}{C_{\mathrm{d}}}{\mathrm{d}}t $$ (3)
    $$ \dfrac{{{\mathrm{d}}\dfrac{{{v_{{\mathrm{sx}}}}}}{{{v_{{\mathrm{gx}}}}}}}}{{{{\left( {1 - \dfrac{{{v_{{\mathrm{sx}}}}}}{{{v_{{\mathrm{gx}}}}}}} \right)}^2}}}{\text{ = }}\dfrac{{3{\rho _{\mathrm{g}}}}}{{4{d_{\text{s}}}{\rho _s}}}{v_{{\mathrm{gx}}}}{C_{\mathrm{d}}}{\mathrm{d}}t $$ (4)

    积分可得

    $$ {\left( {1 - \frac{{{v_{{\mathrm{sx}}}}}}{{{v_{{\mathrm{gx}}}}}}} \right)^{ - 1}}{\text{ = }}\frac{{3{\rho _{\mathrm{g}}}}}{{4{d_{\text{s}}}{\rho _{\mathrm{s}}}}}{v_{{\mathrm{gx}}}}{C_{\mathrm{d}}}t + C $$ (5)

    式中C为常数。

    当$ t $=0时,$ {v_{{\mathrm{sx}}}} $=0,C=1,代入式(5)可得

    $$ {\left( {\frac{{{v_{{\mathrm{gx}}}} - {v_{{\mathrm{sx}}}}}}{{{v_{{\mathrm{gx}}}}}}} \right)^{{{ - }}1}}{\text{ = }}\frac{{3{\rho _{\mathrm{g}}}{v_{{\mathrm{gx}}}}{C_{\mathrm{d}}}t{\text{ + }}4{d_{\text{s}}}{\rho _{\mathrm{s}}}}}{{4{d_{\text{s}}}{\rho _{\mathrm{s}}}}} $$ (6)

    由此可得球形粉尘颗粒的扩散速度:

    $$ {v_{{\mathrm{sx}}}}{\text{ = }}{v_{{\mathrm{gx}}}} - \frac{{4{d_{\text{s}}}{\rho _{\mathrm{s}}}{v_{{\mathrm{gx}}}}}}{{3{\rho _{\mathrm{g}}}{v_{{\mathrm{gx}}}}{C_{\mathrm{d}}}t + 4{d_{\text{s}}}{\rho _{\mathrm{s}}}}} $$ (7)

    式(7)即综掘工作面粉尘扩散模型,可见粉尘扩散速度主要受巷道内水平方向空气流速、球形粉尘颗粒直径和运动时间影响。

    粉尘颗粒在掘进巷道内的沉降运动主要受气体阻力和重力的共同作用[18],因此有

    $$ \frac{{\text{π}} }{6}d_{\mathrm{s}}^3{\rho _{\mathrm{s}}}\frac{{{\mathrm{d}}{v_{{\mathrm{sy}}}}}}{{{\mathrm{d}}t}}{\text{ = }}\frac{{\text{π}} }{6}d_{\mathrm{s}}^3{\rho _{\mathrm{s}}}g - \frac{1}{8}{\text{π}} {C_{\mathrm{d}}}{\rho _{\mathrm{g}}}{\left( {{v_{{\mathrm{gy}}}} - {v_{{\mathrm{sy}}}}} \right)^2} {d_{\mathrm{s}}}^2$$ (8)

    式中:$g$为重力加速度,m/s2;$ {v_{{\mathrm{sy}}}} $为球形粉尘颗粒沉降速度,m/s;$ {v_{{\mathrm{gy}}}} $为巷道内垂直方向空气流速,m/s。

    化简积分可得

    $$ {v}_{{\mathrm{sy}}}=\left\{ \begin{array}{l}{v}_{{\mathrm{gy}}}-\dfrac{{\exp}\left({\dfrac{1}{2}mgt}\right)+1}{m-m{\exp}\left({\dfrac{1}{2}mgt}\right)}\qquad m{v}_{{\mathrm{gy}}}-m{v}_{{\mathrm{sy}}}-1>0 \\ {v}_{{\mathrm{gy}}}-\dfrac{1-{\exp}\left({\dfrac{1}{2}mgt}\right)}{m+m{\exp}\left({\dfrac{1}{2}mgt}\right)}\qquad m{v}_{{\mathrm{gy}}}-m{v}_{{\mathrm{sy}}}-1<0 \end{array}\right.$$ (9)
    $$ m = \sqrt {\frac{{3{C_{\mathrm{d}}}{\rho _{\mathrm{g}}}}}{{4{d_{\mathrm{s}}}{\rho _{\mathrm{s}}}g}}} $$ (10)

    式(9)即综掘工作面粉尘沉降模型,可见粉尘沉降速度受巷道内垂直方向空气流速、球形粉尘颗粒直径和运动时间的影响。由于粉尘颗粒直径为不可控变量,控制掘进巷道风流场扰动范围和减小粉尘颗粒运动时间,成为研究综掘工作面降尘技术的关键。

    气室降尘技术是在风幕降尘技术基础上开发而来。风幕降尘技术在实际生产中存在动力不足、射流孔易堵塞等问题,因此对综掘工作面正压风筒进行改造,即在风筒末端安装6个风袖,风袖吹出的风流与风幕共同形成气室封闭区域,通过除尘风机连接负压风筒将气室封闭区域内的粉尘抽出净化,如图1所示。气室降尘技术将长压短抽通风降尘与风幕降尘的优势相结合,通过在正压风筒末端开启风袖来降低粉尘扰动范围,从而达到良好的降尘效果。

    图  1  气室降尘技术原理
    Figure  1.  Principle of air chamber dust reduction technology

    根据巴拉素煤矿2号煤2号回风大巷综掘工作面现场情况,采用DesignModeler软件建立几何模型,构建40 m×5.8 m×3.5 m(长×宽×高)的综掘区域。掘进机设计为5 m×3.1 m×1.4 m(长×宽×高)的长方体。风筒布置在巷道两侧靠近巷道顶板位置,正压风筒直径为1 m,距综掘工作面8 m。在正压风筒上安装6个直径为0.3 m的风袖。负压风筒直径为0.8 m。距综掘工作面3.5 m处顶部安装1根风幕杆。

    采用Meshing对建立的几何模型进行网格划分。选取四面体网格,在风袖口、出风口和吸风口进行网格加密,计算得到几何模型的非结构化网格,如图2所示。网格数量为587 764个,平均质量为0.96。

    图  2  综掘工作面几何模型网格划分
    Figure  2.  Grid division of geometry model of fully mechanized mining face

    完成网格划分后,设定求解条件:采用标准K−ε双方程湍流模型,重力加速度为−9.81 m/s2,空气密度为1.225 kg/m3,动力黏度为1.81×10−5 kg/(m·s),壁面设置为均匀无滑移壁面,收敛标准以各项监测指标达到稳定为止,其他采用默认设置或简化。因研究粉尘在空气中的运动,即离散相与连续相的耦合问题,可以将粉尘颗粒作为单独的研究对象,以欧拉−拉格朗日方式构建DPM。该模型可以处理离散相耦合问题,计算粉尘运动分布。

    长压短抽通风降尘是由压入式通风机将外部新鲜风流经风筒送至工作面,同时将含有粉尘等杂质的污浊风流由抽风筒抽离工作面[19],从而满足工作面用风除尘要求。模拟只采用长压短抽通风降尘技术时,综掘工作面呼吸带(距底板1.6 m)水平面及距工作面不同距离的巷道纵截面处粉尘浓度分布,如图3所示。

    图  3  采用长压短抽通风降尘时综掘工作面粉尘浓度分布
    Figure  3.  Dust concentration distribution in fully mechanized mining face under longpressure and short suction ventilation for dust reduction

    图3可看出,正压风筒在通风机的作用下将新鲜风流送达用风地点,综掘工作面产生的粉尘随风流运动,一部分含尘风流在抽风筒的负压作用下抽出,致使回风侧粉尘浓度较高,另一部分含尘风流继续扩散到掘进巷道内,在掘进巷道作业区域产生涡流区,使得掘进机司机被包裹在较高浓度的粉尘中;距综掘工作面25 m之后,粉尘浓度降低。

    风幕降尘是在长压短抽通风降尘基础上,在掘进机前平行于综掘工作面安装风幕装置,风幕出口的高速风流垂直射向巷道底板,形成射流屏障,从而将污浊风流隔断在风幕控制范围内,在抽风筒的作用下,将污浊风流抽离净化,降低巷道内粉尘浓度[20]。模拟只采用风幕降尘技术时,综掘工作面呼吸带水平面及距工作面不同距离的巷道纵截面处粉尘浓度分布,如图4所示。

    图  4  采用风幕降尘时综掘工作面粉尘浓度分布
    Figure  4.  Dust concentration distribution in fully mechanized mining face under air curtain dust reduction

    图4可看出,在综掘工作面设置风幕能够将大部分粉尘阻隔在风幕屏障之内,风幕后方工作区域粉尘浓度明显降低;正压风筒的出风口风流在经过风幕射流阻碍时发生偏移,同时受掘进机自身庞大体积的影响而发生紊乱,偏离原轨道,导致部分含尘风流沿负压风筒无序逸散,造成巷道内粉尘浓度升高。

    对比图3图4可看出,与长压短抽通风降尘技术相比,风幕降尘技术可将综掘工作面粉尘浓度由600 mg/m3降至480 mg/m3,风幕降尘区域粉尘浓度虽略有上升,但掘进巷道内其他区域粉尘浓度整体下降,验证了风幕降尘技术效果更佳,但综掘工作面粉尘浓度仍严重超标。

    在风幕降尘基础上,在正压风筒末端中上部开启风袖,风袖吹出的风流与风幕屏障共同作用,将粉尘控制在气室封闭区域内。气室降尘模拟结果如图5所示。

    图  5  采用气室降尘时综掘工作面粉尘浓度分布
    Figure  5.  Dust concentration distribution in fully mechanized mining face under air chamber dust reduction

    图5可看出,气室降尘技术对粉尘的控制作用明显,高浓度粉尘集中在气室封闭区域内,仅少量含尘风流逸散对巷道造成较小污染,绝大部分粉尘被负压风筒抽出净化;气室封闭区域外呼吸带粉尘浓度降至350 mg/m3以下,除尘效果较风幕降尘大幅改善,距工作面15 m以外粉尘浓度明显降低,未形成明显的大范围粉尘逸出,作业环境得到大幅改善。

    正压风筒出风口位置对气室降尘技术的效率影响显著,出风口位置过远或过近都会导致除尘效果不佳[21]。为确定气室降尘技术最佳出风口位置,采用控制变量法设计不同方案,各方案中通风方式、风幕风袖开启状态下出风口风量等条件均相同,探究正压风筒出风口位置距综掘工作面不同距离时气室降尘技术效果。

    根据《煤矿安全规程》,风筒出风口到达风流射出的最远距离称为局部通风机风流有效射程[22]

    $$ L=\alpha A^{1/2 } $$ (11)

    式中:L为风流有效射程,m;α为风流有效射程系数,α=4~5,风筒出口风速较小时为4,较大时为5;A为巷道断面积,m2

    本文中风流有效射程L|m=5×(5.8×3.5)1/2≈23。结合现场技术人员的经验,在风流有效射程之内选择8,14,23 m 3个出风口位置。其中距综掘工作面8 m的情况已在4.3节中模拟,距综掘工作面14,23 m时粉尘浓度分布如图6所示。

    图  6  正压风筒出风口距综掘工作面不同距离时粉尘浓度分布
    Figure  6.  Dust concentration distribution under different distances of positive pressure air duct away from fully mechanized mining face

    图6(a)可看出,正压风筒出风口距综掘工作面14 m时,高浓度粉尘集中分布在距综掘工作面10 m范围内,大部分粉尘被阻隔在气室封闭区域,该区域粉尘浓度达800 mg/m3以上;气室封闭区域外,随着距综掘工作面距离增大,粉尘浓度整体呈下降趋势,距工作面20 m之后,粉尘颗粒基本消失。

    图6(b)可看出,正压风筒出风口距综掘工作面23 m时,由于风筒距离风幕过远,风筒及风袖吹出的风流未能完全到达风幕位置,未能与风幕共同作用形成明显的气室封闭区域,扰动的风流还会将原本已经沉降到壁面上的颗粒再度吹起,导致整个巷道内粉尘浓度处于较高范围,呼吸带大部分位置粉尘浓度达500 mg/m3以上,严重影响人员健康。

    可见,正压风筒出风口距综掘工作面距离由8 m增加到14 m时,由于出风口及风袖的风流到达风幕时风速变小,不会对风幕射流产生冲击,增强了气室的封闭性,除尘效果最好;出风口距综掘工作面距离由14 m增加到23 m时,因距离较远,较长的风流运动无法配合风幕射流形成气室封闭区域,且会引发二次扬尘,导致降尘效率大幅降低。因此,将正压风筒出风口距综掘工作面距离14 m作为最优参数。

    负压风筒可以有效地将污浊风流抽出,而其末端直径是影响降尘效果的重要因素之一。考虑研究的除尘器直径为0.8 m,所连接负压风筒直径也为0.8 m,在此基础上,将负压风筒末端直径设置为0.7,0.6,0.5 m进行模拟分析,正压风筒出风口距综掘工作面距离采用最优参数14 m,其余参数均相同。负压风筒末端直径为0.8 m的情况已在5.1节模拟,末端直径为0.7,0.6,0.5 m时粉尘浓度模拟结果如图7所示。

    图  7  不同负压风筒末端直径下综掘工作面粉尘浓度分布
    Figure  7.  Dust concentration distribution in fully mechanized mining face under different end diameter of negative pressure duct

    图7(a)可看出,因设定的除尘风机吸风量不变,负压风筒末端直径由0.8 m减小至0.7 m时,吸风口风速增大,含粉尘风流迅速被负压风筒连接的湿式除尘风机抽出净化,增强了负压风筒除尘效果;距综掘工作面10 m外,高浓度粉尘基本消失,气室封闭区域内粉尘颗粒被负压风筒快速抽出,降尘效率大幅提高。

    图7(b)可看出,将负压风筒末端直径减小至0.6 m时,在负压风筒吸风量固定的情况下,其卷吸能力大幅提高,气室封闭区域内隔绝的粉尘颗粒被快速抽出,呼吸带粉尘得到了更大程度的净化;距工作面5~10 m范围内粉尘浓度下降明显,最小值为130 mg/m3

    图7(c)可看出,将负压风筒末端直径减小至0.5 m时,由于风筒末端直径过小,导致阻力损失过大,风压下降,降尘效果较负压风筒直径为0.6 m时差;距工作面5~10 m范围内,粉尘浓度由负压风筒末端直径为0.6 m时的130 mg/m3上升至370 mg/m3,对掘进机司机的职业健康造成严重威胁。

    可见,负压风筒末端直径由0.8 m逐渐减小为0.6 m过程中,负压风筒的卷吸能力不断加强,对综掘工作面的粉尘控制效果增强,工作面粉尘浓度明显下降;当负压风筒末端直径减小为0.5 m时,降尘能力减弱,工作面粉尘浓度升高,且现场应用中还存在风机超压风险。由此得出负压风筒末端直径最优参数为0.6 m。

    在巴拉素煤矿2号煤2号回风大巷综掘工作面进行现场试验,测试气室降尘技术效果。气室降尘技术参数采用模拟所得的最优参数,同时设置长压短抽通风降尘与风幕降尘为对照组,对综掘工作面粉尘浓度进行采样。为便于测试气室封闭区域内粉尘浓度,将掘进机司机位置设于气室封闭区域内。试验选择在掘进机司机处(点a)、压风筒出风口处(点c)和风袖(点e)处,以及巷道中轴线上(点b、点d、点f、点g、点h、点i)布置测点,点b距综掘工作面3 m,点d−点h两两间隔7 m,点i距综掘工作面50 m,如图8所示。

    图  8  测点位置
    Figure  8.  Positions of measuring points

    粉尘浓度测量结果如图9所示。

    图  9  不同降尘方式下综掘工作面粉尘浓度测量结果
    Figure  9.  Measured results of dust concentration distribution in fully mechanized mining face under different dust reduction methods

    综掘工作面只采用长压短抽通风降尘时,距综掘工作面10 m内,大量粉尘没有被负压风筒抽离,粉尘浓度逐渐增大,距工作面10 m处达到最大值498 mg/m3。距综掘工作面10 m之外,随着距工作面距离增大,粉尘浓度整体呈下降趋势,距工作面50 m处下降至184 mg/m3。可见长压短抽通风降尘会对粉尘颗粒移动产生影响,但降尘效果有限,易在掘进巷道工作区域形成粉尘聚集,影响综掘工作面正常生产与人员健康。

    加入风幕降尘后,因气流受风幕阻隔,高浓度粉尘控制在风幕外,风幕外粉尘浓度最高达473 mg/m3,现场能见度较低。距综掘工作面31 m处粉尘浓度最低,为156 mg/m3。可见风幕降尘可将掘进过程中产生的大部分粉尘限制在狭小空间内,使得风幕外粉尘浓度较未开启风幕时大,封闭区域内聚集的含尘风流被负压风筒及时抽出,降低了工作面粉尘浓度。

    采用气室降尘后,风袖风流补充到风幕墙,将含尘风流最大程度地限制在气室封闭区域内,负压风筒迅速将气室封闭区域内聚集的粉尘颗粒抽出净化,巷道内粉尘浓度下降明显,距综掘工作面50 m处粉尘浓度降至118 mg/m3。可见气室降尘封闭效果良好,仅有少量含尘风流随负压风筒风流影响逃逸出封闭气室,有效破坏了粉尘在综掘工作面聚集,可极大改善工作环境。

    以综掘工作面仅使用长压短抽通风降尘时的降尘效果为基准,绘制风幕降尘与气室降尘在不同测点位置的降尘效率曲线,如图10所示。

    图  10  不同降尘方式的降尘效率曲线
    Figure  10.  Dust reduction efficiency of different dust reduction methods

    图10可看出,采用风幕降尘或气室降尘较采用长压短抽通风降尘时,气室封闭区域内的降尘效率均下降了17%以上,原因是风袖风流和风幕对截割产生的粉尘发挥有阻挡作用,阻碍粉尘在巷道内扩散,导致气室封闭区域内粉尘浓度上升,降尘效率下降;在气室封闭区域外,各测点位置的降尘效率均较长压短抽通风降尘有所提升,气室降尘效率平均提升54.8%,风幕降尘效率平均提升39.1%,风袖处气室降尘效率达77.6%,较风幕降尘提高24%。总体来看,气室降尘技术的降尘效率优于风幕降尘。

    1) 通过分析综掘工作面粉尘受力情况,建立了粉尘运动数学模型,得出减少粉尘颗粒运动时间和控制风流范围是降低工作面粉尘浓度的关键。

    2) 采用Fluent软件对气室降尘技术进行模拟研究,结果表明该技术能充分发挥风幕的效果,将综掘工作面产生的含尘气流控制在气室封闭区域内,减少尘粒运动时间,避免工作区域产生涡流区。

    3) 对气室降尘技术参数进行优化,得出正压风筒出风口距综掘工作面14 m、负压风筒末端直径为0.6 m时降尘效果最好。

    4) 现场试验表明,采用气室降尘技术后,综掘工作面粉尘浓度最小值控制在118 mg/m3,降尘效果和效率均优于长压短抽通风降尘和风幕降尘。

    5) 为进一步改善掘进机司机工作环境,下一步将着重研究降低气室封闭区域内粉尘浓度的方法。

  • 图  1   基于Lite−HRNet和MEST−GCN的行为识别模型结构

    Figure  1.   Architecture of behavior recognition model based on Lite-HRNet and MEST-GCN

    图  2   Lite−HRNet提取的人体关键点

    Figure  2.   Human keypoints extracted by Lite-HRNet

    图  3   人体时空图

    Figure  3.   Human spatial-temporal map

    图  4   MEST−GCN和ST−GCN结构

    Figure  4.   MEST-GCN and ST-GCN structures

    图  5   在时间维度上的平移操作

    Figure  5.   Shift operation in the temporal dimension

    图  6   精度和平均损失随迭代次数变化的曲线

    Figure  6.   Relationship curves of accuracy and average loss with iteration number

    图  7   Lite−HRNet对矿工动作关键点的提取效果

    Figure  7.   Keypoint extraction results of miner actions using Lite-HRNet

    图  8   不同网络提取矿工摔倒动作的关键点

    Figure  8.   Keypoint extraction of falling miner using different networks

    图  9   不同模型在MBD数据集上的可视化识别效果

    Figure  9.   Visualization of recognition results from different models on the MBD dataset

    表  1   不同关键点数据对比实验

    Table  1   Comparison results of different keypoint data %

    关键点数据结合图卷积模型 准确率
    X−sub X−view
    模型1 80.3 89.6
    模型2 86.9 92.5
    模型3 86.5 91.8
    模型4 88.0 92.6
    下载: 导出CSV

    表  2   不同注意力模块对比实验结果

    Table  2   Comparative results of different attention modules

    模型 准确率/% 参数量/Mib
    X−sub X−view
    ST−GCN 87.3 92.4 3.12
    ST−GCN−6 86.5 91.8 1.30
    ST−GCN−6+SE 86.9 91.8 1.43
    ST−GCN−6+CBAM 87.2 92.0 2.14
    MEST−GCN 88.0 92.6 1.87
    下载: 导出CSV

    表  3   不同模型在MBD数据集上的对比实验

    Table  3   Comparison of different models on the MBD datasets

    模型 准确率/% 参数/Mib 帧率/(帧∙s−1
    ST−GCN 88.0 3.12 12.77
    2s−AGCN 89.0 6.95 7.65
    CTR−GCN 89.3 2.60 7.59
    MS−G3D 87.3 6.42 3.36
    MEST−GCN 88.5 1.87 18.26
    下载: 导出CSV
  • [1] 张涵,王峰. 基于矿工不安全行为的煤矿生产事故分析及对策[J]. 煤炭工程,2019,51(8):177-180.

    ZHANG Han,WANG Feng. Countermeasure and analysis on accidents of mines based on staff's unsafe behaviors[J]. Coal Engineering,2019,51(8):177-180.

    [2] 苏晨阳,武文红,牛恒茂,等. 深度学习的工人多种不安全行为识别方法综述[J]. 计算机工程与应用,2024,60(5):30-46.

    SU Chenyang,WU Wenhong,NIU Hengmao,et al. Review of deep learning approaches for recognizing multiple unsafe behaviors in workers[J]. Computer Engineering and Applications,2024,60(5):30-46.

    [3]

    WANG Zheng,LIU Yan,DUAN Siyuan,et al. An efficient detection of non-standard miner behavior using improved YOLOv8[J]. Computers and Electrical Engineering,2023,112. DOI: 10.1016/j.compeleceng.2023.109021.

    [4] 陈天,闫雨寒,徐达伟,等. 基于改进双流算法的矿工行为识别方法研究[J]. 河南科技大学学报(自然科学版),2021,42(4):47-53,7.

    CHEN Tian,YAN Yuhan,XU Dawei,et al. Research on miner behavior recognition method based on improved two-stream algorithm[J]. Journal of Henan University of Science and Technology(Natural Science),2021,42(4):47-53,7.

    [5]

    XIN Fangfang,HE Xinyu,YAO Chaoxiu,et al. A real-time detection for miner behavior via DYS-YOLOv8n model[J]. Journal of Real-Time Image Processing,2024,21(3). DOI: 10.1007/s11554-024-01466-0.

    [6]

    WANG Yu,CHEN Xiaoqing,LI Jiaoqun,et al. Convolutional block attention module-multimodal feature-fusion action recognition:enabling miner unsafe action recognition[J]. Sensors,2024,24(14). DOI: 10.3390/s24144557.

    [7] 程健,李昊,马昆,等. 矿井视觉计算体系架构与关键技术[J]. 煤炭科学技术,2023,51(9):202-218. DOI: 10.12438/cst.2023-0152

    CHENG Jian,LI Hao,MA Kun,et al. Architecture and key technologies of coal mine underground vision computing[J]. Coal Science and Technology,2023,51(9):202-218. DOI: 10.12438/cst.2023-0152

    [8] 王宇,于春华,陈晓青,等. 基于多模态特征融合的井下人员不安全行为识别[J]. 工矿自动化,2023,49(11):138-144.

    WANG Yu,YU Chunhua,CHEN Xiaoqing,et al. Recognition of unsafe behaviors of underground personnel based on multi modal feature fusion[J]. Journal of Mine Automation,2023,49(11):138-144.

    [9]

    CAO Xiangang,ZHANG Chiyu,WANG Peng,et al. Unsafe mining behavior identification method based on an improved st-gcn[J]. Sustainability,2023,15(2). DOI: 10.3390/su15021041.

    [10]

    SUN Zehua,LIU Jun,KE Qiuhong,et al. Human action recognition from various data modalities:a review[J]. IEEE Transactions on Pattern Analysis and Machine Intelligence,2023,45(3):3200-3225.

    [11]

    WANG Huogen,SONG Zhanjie,LI Wanqing,et al. A hybrid network for large-scale action recognition from RGB and depth modalities[J]. Sensors,2020,20(11). DOI: 10.3390/s20113305.

    [12]

    REN Bin,LIU Mengyuan,DING Runwei,et al. A survey on 3d skeleton-based action recognition using learning method[J]. Cyborg and Bionic Systems,2024,5. DOI: 10.34133/cbsystems.0100.

    [13]

    YAN Sijie,XIONG Yuanjun,LIN Dahua. Spatialtemporal graph convolutional networks for skeleton-based action recognition[C]. AAAI Conference on Artificial Intelligence,New Orleans,2018. DOI: 10.48550/arXiv.1801.07455.

    [14]

    YANG Huaigang,REN Ziliang,YUAN Huaqiang,et al. Multi-scale and attention enhanced graph convolution network for skeleton-based violence action recognition[J]. Frontiers in Neurorobotics,2022,16. DOI: 10.3389/fnbot.2022.1091361.

    [15]

    XING Yuling,ZHU Jia,LI Yu,et al. An improved spatial temporal graph convolutional network for robust skeleton-based action recognition[J]. Applied Intelligence,2023,53(4):4592-4608. DOI: 10.1007/s10489-022-03589-y

    [16] 黄瀚,程小舟,云霄,等. 基于DA−GCN的煤矿人员行为识别方法[J]. 工矿自动化,2021,47(4):62-66.

    HUANG Han,CHENG Xiaozhou,YUN Xiao,et al. DA-GCN-based coal mine personnel action recognition method[J]. Industry and Mine Automation,2021,47(4):62-66.

    [17] 刘浩,刘海滨,孙宇,等. 煤矿井下员工不安全行为智能识别系统[J]. 煤炭学报,2021,46(增刊2):1159-1169.

    LIU Hao,LIU Haibin,SUN Yu,et al. Intelligent recognition system of unsafe behavior of underground coal miners[J]. Journal of China Coal Society,2021,46(S2):1159-1169.

    [18] 李雯静,刘鑫. 基于深度学习的井下人员不安全行为识别与预警系统研究[J]. 金属矿山,2023(3):177-184.

    LI Wenjing,LIU Xin. Research on underground personnel unsafe behavior identification and early warning wystem based on deep learning[J]. Metal Mine,2023(3):177-184.

    [19] 李善华,肖涛,李肖利,等. 基于DRCA−GCN的矿工动作识别模型[J]. 工矿自动化,2023,49(4):99-105,112.

    LI Shanhua,XIAO Tao,LI Xiaoli,et al. Miner actionrecognition model based on DRCA-GCN[J]. Journal of Mine Automation,2023,49(4):99-105,112.

    [20]

    YU Changqian,XIAO Bin,GAO Changxin,et al. Lite-HRNet:a lightweight high-resolution network[C]. IEEE/CVF Conference on Computer Vision and Pattern Recognition,Nashville,2021:10440-10450.

    [21]

    SUN Ke,XIAO Bin,LIU Dong,et al. Deep high-resolution representation learning for human pose estimation[C]. IEEE/CVF Conference on Computer Vision and Pattern Recognition,Long Beach,2019:5693-5703.

    [22]

    ZHANG Yu,GAN Junsi,ZHAO Zewei,et al. A real-time fall detection model based on BlazePose and improved ST-GCN[J]. Journal of Real-Time Image Processing,2023,20(6). DOI: 10.1007/s11554-023-01377-6.

    [23]

    KONG Yu,FU Yun. Human action recognition and prediction:a survey[J]. International Journal of Computer Vision,2022,130(5):1366-1401. DOI: 10.1007/s11263-022-01594-9

    [24]

    HU Jie,SHEN Li,SAMUEL A,et al. Squeeze-and-excitation networks[J]. IEEE Transactions on Pattern Analysis and Machine Inetlligence,2020,42(8):2011-2023. DOI: 10.1109/TPAMI.2019.2913372

    [25]

    WOO S,PARK J,LEE J,et al. Cbam:convolutional block attention module[C]. European Conference on Computer Vision,Munich,2018:3-19.

图(9)  /  表(3)
计量
  • 文章访问数:  421
  • HTML全文浏览量:  9
  • PDF下载量:  36
  • 被引次数: 0
出版历程
  • 收稿日期:  2024-09-15
  • 修回日期:  2024-11-22
  • 网络出版日期:  2024-12-05
  • 刊出日期:  2024-11-24

目录

/

返回文章
返回