知识图谱中知识的生成方法和装置制造方法及图纸

技术编号:40751477 阅读:22 留言:0更新日期:2024-03-25 20:07
本说明书实施例提供了一种知识图谱中知识的生成方法和装置。该方法的一具体实施方式包括:接收用户通过可视化界面创建的处理逻辑DAG,输入的源数据的指示信息,和用户针对处理逻辑DAG配置的与知识生成相关的场景信息,其中,处理逻辑DAG包括多个组件和组件之间的连接关系,每个组件对应知识生成过程中的一个数据处理算子;从模板库中确定与场景信息匹配的DAG形式的目标执行模板,根据目标执行模板对处理逻辑DAG进行转换,基于转换结果形成执行计划DAG,其中,执行计划DAG包括机器可识别的多个任务和任务之间的连接关系;根据源数据的指示信息,按照执行计划DAG调度执行多个任务,从而基于源数据生成知识图谱中的知识。

【技术实现步骤摘要】

本说明书实施例涉及知识图谱,尤其涉及一种知识图谱中知识的生成方法和装置


技术介绍

1、在知识图谱
,从数据到知识是一个相对复杂的处理过程。主要体现在数据来源的复杂性、知识的复杂性、数据质量问题等等。具体而言,用于构建知识图谱的数据来源复杂,例如,可能包括结构化数据、半结构化数据和非结构化数据等等,而每种数据都需要不同的方法进行加工处理。而且,数据来源还可能是多源异构的,需要进行数据集成、关系抽取等处理,才能得到适合图谱的数据。此外,知识图谱所涉及的知识非常庞杂复杂,知识之间存在着复杂的关系和联系。为了将知识整合到一个图谱中,需要采用多种技术和方法进行知识加工和处理。另外,数据的质量也可能不尽如人意,存在不准确、不完整、重复等问题。因此,需要对数据进行清洗、去重、纠错等处理,才能得到高质量的知识。总之,面对情况复杂的数据和知识,想要生成知识图谱中的知识是一个相对复杂的处理过程。


技术实现思路

1、本说明书的实施例描述了一种知识图谱中知识的生成方法和装置,本方法在面对情况复杂的数据和知识时,可以简单、快捷本文档来自技高网...

【技术保护点】

1.一种知识图谱中知识的生成方法,包括:

2.根据权利要求1所述的方法,其中,所述接收用户通过可视化界面创建的处理逻辑DAG,包括:

3.根据权利要求1所述的方法,其中,所述场景信息包括,DAG场景类型和输出场景条件;

4.根据权利要求1所述的方法,其中,所述根据所述目标执行模板对所述处理逻辑DAG进行转换,包括:

5.根据权利要求1所述的方法,其中,所述基于转换结果形成执行计划DAG,包括:

6.根据权利要求1所述的方法,其中,所述执行计划DAG中的任务包括同步任务和异步任务,所述异步任务采用分布式计算的方式由预设资源池对应的...

【技术特征摘要】

1.一种知识图谱中知识的生成方法,包括:

2.根据权利要求1所述的方法,其中,所述接收用户通过可视化界面创建的处理逻辑dag,包括:

3.根据权利要求1所述的方法,其中,所述场景信息包括,dag场景类型和输出场景条件;

4.根据权利要求1所述的方法,其中,所述根据所述目标执行模板对所述处理逻辑dag进行转换,包括:

5.根据权利要求1所述的方法,其中,所述基于转换结果形成执行计划dag,包括:

6.根据权利要求1所述的方法,其中,所述执行计划dag中的任务包括同步任务和异步任务,所述异步任务采用分布式计算的方式由预设资源池对应的执行集群执行。

7.根据权利要求6所述的方法,其中,异步任务包括目标任务,以及所述调度执行所述多个任务,包括:

8.根据权利要求4所述的方法,其中,所述后置任务包括,将生成的知识进行离线数据存储和/或在线数据存储。

9.根据权利要求4所述的方法,其中,其中,所述前置任务包括,对所述源数据的数据量进行统计;以及,

10.根据权利要求9所述的方法,其...

【专利技术属性】
技术研发人员:阳进
申请(专利权)人:支付宝杭州信息技术有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1