Big data cleaning modeling of operation status of coal mine fully—mechanized coal mining equipment
-
摘要: 针对煤矿综采设备运行状态数据量大、数据存在噪声和缺失值等问题,建立了一种基于MapReduce的煤矿综采设备运行状态大数据清洗模型。该模型采用双MapReduce协同工作:通过第1个MapReduce对数据中的噪声点和缺失值进行修正,输出多个清洗后的数据文件;通过第2个MapReduce对多个清洗后的数据文件按采集时间及日期进行排序,并合并成单个数据文件输出。实验结果表明,该模型能有效剔除噪声数据和补全缺失数据,具有较好的数据清洗效果。Abstract: In view of problems of large amount of data and noise and missing values existed in data of operation status of coal mine fully—mechanized coal mining equipment, a big data cleaning model of operation status of coal mine fully—mechanized coal mining equipment based on MapReduce was established. The model is composed of dual MapReduce. Noise points and missing values in data are corrected and multiple cleaned data files are output through the first MapReduce. The multiple cleaned data files are sorted according to collection time and date and combined into a single data file through the second MapReduce. The experimental results show that the model can effectively eliminate noise data and complement missing data with good data cleaning effect.
-
-
期刊类型引用(16)
1. 曹现刚,段雍,王国法,赵江滨,任怀伟,赵福媛,杨鑫,张鑫媛,樊红卫,薛旭升,李曼. 煤矿设备全寿命周期健康管理与智能维护研究综述. 煤炭学报. 2025(01): 694-714 . 百度学术
2. 庞义辉,毕经龙,袁鹏喆,赵宝福,丁自伟. 煤机装备全生命周期管理系统架构与关键技术. 煤炭科学技术. 2025(02): 339-350 . 百度学术
3. 孙琪雅,袁逸萍,张润泽,陈彩凤. 基于FCM和CNN-BiLSTM-MHA的矿用带式输送机健康状态评估. 机床与液压. 2025(07): 201-206 . 百度学术
4. 方乾,张晓霞,王霖,石磊,王雅琨. 智能化煤矿大数据治理关键技术研究、实践与应用. 工矿自动化. 2023(05): 37-45+73 . 本站查看
5. 张科学,徐兰欣,李旭,毛明仓,符大利,张玉良,亢磊,王晓玲. 透明工作面智能化开采大数据分析决策方法及系统研究. 煤炭科学技术. 2022(02): 252-262 . 百度学术
6. 王霖,方乾,张晓霞,苏上海,施展,王雅琨. 智能化煤矿数据仓库建模方法. 工矿自动化. 2022(04): 5-13 . 本站查看
7. 温晓荣. 煤矿综采设备多角度检修平台的设计与研究. 自动化技术与应用. 2021(04): 157-161 . 百度学术
8. 寇元宝,汪崇建,贠瑞光,秦翥,慕杰. 基于数据清洗算法的采煤机截割比能耗计算方法. 煤炭工程. 2021(07): 146-150 . 百度学术
9. 张俭让,刘睿卿,李学文,王智鹏,史振东. 采煤机运行状态数据分布式实时预测模型. 工矿自动化. 2021(07): 21-28 . 本站查看
10. 曹现刚,姜韦光,张国祯. 采煤机运行状态数据实时清洗技术研究. 煤炭工程. 2020(03): 127-131 . 百度学术
11. 曹现刚,李彦川,雷卓,雷一楠. 采煤机健康状态智能评估方法研究. 工矿自动化. 2020(06): 41-47 . 本站查看
12. 寇元宝,汪崇建,贠瑞光. 采煤机运行数据预处理算法研究. 煤矿机械. 2020(10): 41-43 . 百度学术
13. 高尚,赵昕. 基于CFDs规则不完整大数据修复序列判定仿真. 计算机仿真. 2020(10): 338-341+397 . 百度学术
14. 陈醒. 煤炭相关数据治理技术研究. 煤炭技术. 2020(12): 148-151 . 百度学术
15. 曹现刚,马宏伟,段雍,徐田波,王岩,李鹏飞. 煤矿设备智能维护与健康管理技术研究现状与展望. 智能矿山. 2020(01): 105-111 . 百度学术
16. 王宇. 矿用机电设备零配件清洗装置的设计应用. 机械管理开发. 2019(09): 80-81 . 百度学术
其他类型引用(7)
计量
- 文章访问数: 68
- HTML全文浏览量: 14
- PDF下载量: 17
- 被引次数: 23