来源：期刊VIP网 时间：
作者：李立宝;袁永;秦正寒;李波;闫政天;李勇;
单位：中国矿业大学矿业工程学院;中国矿业大学深部煤炭资源开采教育部重点实验室;
摘要：针对目前图像与振动信号融合的方法在煤矸识别领域应用存在特征融合困难、实时性和模型复杂度不满足实际应用要求等问题，设计了基于多头注意力（MA）的多层长短期记忆（ML-LSTM）模型MA-ML-LSTM。采用经粒子群优化（PSO）算法优化的变分模态分解（VMD）算法对振动信号进行处理，将能量、能量矩、峭度、波形因数与矩阵奇异值作为特征量，并采用一维卷积网络获取振动信息；在多分类网络ResNet-18基础上删除最后的全连接层，用于对煤矸图像进行深度特征提取；通过MA机制和ML-LSTM网络实现图像与振动双通道特征融合，强化各通道重要特征信息的表达。实验结果表明：MA-ML-LSTM模型的平均识别准确率达98.72%，相比传统单一的ResNet, MobilenetV3, 1D-CNN, LSTM模型分别高4.60%, 7.96%, 5.37%, 6.11%，相比EMD-RF,IMF-SVM,CSPNet-YOLOv7分别高4.18%,4.45%,3.46%，验证了图像特征与振动频谱多源融合驱动的煤矸识别技术的有效性。
关键词：煤矸识别;多源信息融合;振动信号;图像识别;多头注意力机制;多层长短期记忆模型
基金资助：国家自然科学基金项目（52204132）; 江苏高校“青蓝工程”资助项目（苏教师函[2022]29号）; 江苏省研究生科研与实践创新计划资助项目（KYCX24＿2874）; 中国矿业大学未来杰出人才助力计划资助项目（2024WLJCRCZL013）; 湖南省自然科学基金青年项目（2023JJ40285）; 湖南省教育厅优秀青年基金项目（22B0469）
