我们的服务符合学术规范和道德
专业 高端让您使用时没有后顾之忧

工矿自动化2025年第02期:基于大语言模型的矿山事故知识图谱构建

来源:期刊VIP网 时间:


作者:张朋杨;生龙;王巍;魏忠诚;赵继军;

单位:河北工程大学信息与电气工程学院;河北工程大学河北省安防信息感知与处理重点实验室;

摘要:现有矿山领域知识图谱构建方法在预训练阶段需要大量人工标注的高质量监督数据,人力成本高且效率低。大语言模型(LLM)可在少量人工标注的高质量数据下显著提高信息抽取的质量且效率较高,然而LLM结合Prompt的方法会产生灾难性遗忘问题。针对上述问题,将图结构信息嵌入到Prompt模板中,提出了图结构Prompt,通过在LLM上嵌入图结构Prompt,实现基于LLM的矿山事故知识图谱高质量构建。首先,收集煤矿安全生产网公开的矿山事故报告并进行格式修正、冗余信息剔除等预处理。其次,利用LLM挖掘矿山事故报告文本中蕴含的知识,对矿山事故报告文本中的实体及实体间关系进行K-means聚类,完成矿山事故本体构建。然后,依据构建的本体进行少量数据标注,标注数据用于LLM的学习与微调。最后,采用嵌入图结构Prompt的LLM进行信息抽取,实例化实体关系三元组,从而构建矿山事故知识图谱。实验结果表明:在实体抽取和关系抽取任务中,LLM的表现优于通用信息抽取(UIE)模型,且嵌入图结构Prompt的LLM在精确率、召回率、F1值方面均高于未嵌入图结构Prompt的LLM。

关键词:矿山事故;知识图谱;大语言模型;图结构Prompt;本体构建;信息抽取

基金资助:国家自然科学基金资助项目(61802107); 河北省高等学校科学技术研究项目(ZD2020171); 河北省省级科技计划资助项目(22567624H)