【技术实现步骤摘要】
本专利技术涉及一种煤炭企业知识管理系统构建系统及方法,属于计算机信息。
技术介绍
1、煤炭企业知识管理系统是一个集中存储、管理和展示煤炭领域相关知识的系统或平台。它涵盖了煤炭的各个方面,包括但不限于煤炭的地质成因、开采技术、加工利用、市场情况、环境影响以及相关政策法规等。
2、在煤炭行业处于数字化、智能化快速发展的背景下,行业知识的管理和应用成为核心难题,现有知识管理系统缺乏深度和专业性,关联性较差,无法实现多维度分析应用:煤炭行业涉及众多专业技术和复杂问题,需要深入研究和理解。然而,一些煤炭知识库可能只是简单地罗列了一些基础概念和常识,缺乏深入的分析和解读,无法为用户提供有价值的专业指导。
技术实现思路
1、本专利技术的目的在于克服现有技术中的不足,提供一种煤炭企业知识管理系统构建系统及方法,针对现有煤炭行业知识管理系统知识沉淀固化的现状,通过知识图谱和大模型融合的方式,丰富知识库回答领域,优化知识库问题回答方式,为煤炭行业数字化、智能化、绿色化发展贡献力量。
2
...【技术保护点】
1.一种煤炭企业知识管理系统构建方法,其特征是,包括:
2.根据权利要求1所述的煤炭企业知识管理系统构建方法,其特征是,所述煤炭企业知识数据包括内部数据和外部数据:其中内部数据由企业内部系统提供,包括存储于数据库的结构化数据和未存储于数据库的非结构化数据;外部数据通过网络采集和其他煤炭企业提交获得。
3.根据权利要求1所述的煤炭企业知识管理系统构建方法,其特征是,对煤炭企业知识数据进行预处理,包括:使用大数据技术对所述煤炭企业知识数据进行清洗、核查和分类,剔除无效数据、异常数据和不真实数据,然后将非结构化数据转换为结构化数据。
4.
...【技术特征摘要】
1.一种煤炭企业知识管理系统构建方法,其特征是,包括:
2.根据权利要求1所述的煤炭企业知识管理系统构建方法,其特征是,所述煤炭企业知识数据包括内部数据和外部数据:其中内部数据由企业内部系统提供,包括存储于数据库的结构化数据和未存储于数据库的非结构化数据;外部数据通过网络采集和其他煤炭企业提交获得。
3.根据权利要求1所述的煤炭企业知识管理系统构建方法,其特征是,对煤炭企业知识数据进行预处理,包括:使用大数据技术对所述煤炭企业知识数据进行清洗、核查和分类,剔除无效数据、异常数据和不真实数据,然后将非结构化数据转换为结构化数据。
4.根据权利要求1所述的煤炭企业知识管理系统构建方法,其特征是,所述大模型模块创建完成后,选用glm开源预训练模型作为原始基座模型,然后使用所述问答对数据进行训练微调,包括:对问答对数据进行去重、清洗不规范数据操作,将其转换为指定模型微调所需的数据集格式;然后采用lora微调技术对指定的参数进行调整,包括lora的秩、lora的缩放因子以及在lora层使用的dropout概率;最后使用transformers库对模型进行微调,包括模型加载、数据预划分与分批、优化器和损失函数定义、训练参数设置、中间步模型权重保存;在lora微调结束后,需要将lora训练出来的模型权重与原始基座模型进行合并。
5.根据权利要求1所述的煤炭企业知识管理系...
【专利技术属性】
技术研发人员:王瑜,卫中宽,李岑,白冬艳,张树森,何洁昕,朱云鹏,倪腾,
申请(专利权)人:中煤天津设计工程有限责任公司,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。