本发明专利技术提供一种基于图数据库的数据处理方法及装置,属于数据处理技术领域。基于图数据库的数据处理方法包括:获取图数据库的待处理数据;计算所述待处理数据的关系深度;在所述待处理数据的关系深度大于预设的关系阈值时,将所述待处理数据进行语义化后存储在所述图数据库中。本发明专利技术的技术方案,能够提高图数据库的查询效率。
【技术实现步骤摘要】
基于图数据库的数据处理方法及装置
本专利技术涉及数据处理
,特别是指一种基于图数据库的数据处理方法及装置。
技术介绍
现在图数据库(graphdatabase)越来越受到欢迎,人们使用图数据库来支持知识图谱、画像类应用,图数据库也可称为面向图的数据库,在图数据库中是以“图”这种数据结构存储和查询数据,通过节点、边和属性等方式来表示和存储数据,支持增加、删除、修改和查询等操作。现有技术中,是将待存储的数据进行语义化导入图数据库,但一些数据并不适合进行语义化存储,因而会降低图数据库的查询效率。
技术实现思路
本专利技术要解决的技术问题是提供一种基于图数据库的数据处理方法及装置,能够提高图数据库的查询效率。为解决上述技术问题,本专利技术的实施例提供技术方案如下:一方面,提供一种基于图数据库的数据处理方法,包括:获取图数据库的待处理数据;计算所述待处理数据的关系深度;在所述待处理数据的关系深度大于预设的关系阈值时,将所述待处理数据进行语义化后存储在所述图数据库中。进一步地,还包括:在所述待处理数据的关系深度不大于所述预设的关系阈值时,将所述待处理数据存储在关系数据库或键值数据库中。进一步地,所述计算所述待处理数据的关系深度包括:查找与所述待处理数据关联的关联数据;分别计算所述待处理数据与每一关联数据之间的最短路径;从计算出的所有最短路径中确定一最大值作为所述待处理数据的关系深度。进一步地,所述待处理数据包括以下至少一种:待存储在所述图数据库中的数据;与所述图数据库中待删除的数据直接关联的数据。进一步地,将所述待处理数据进行语义化后存储在所述图数据库中之后,所述方法还包括:获取所述待处理数据的修改数据;将所述修改数据进行语义化后存储在所述图数据库中。进一步地,还包括设置所述关系阈值的步骤,所述设置所述关系阈值的步骤包括:确定所述关系阈值的取值区间;从所述取值区间内选取一关系阈值测试值,以所述关系阈值测试值为关系深度N次读取所述图数据库中的数据,计算N次读取所需要的时间和,重复该步骤,得到所述取值区间内每一关系阈值测试值对应的时间和,N为正整数;确定与最小的时间和对应的关系阈值测试值作为所述关系阈值。进一步地,还包括确定所述取值区间的上限的步骤,所述确定所述取值区间的上限的步骤包括:选取数据步骤,选取M个数据,所述M个数据的关系深度均大于等于预设阈值D1,D1为大于2的整数;存储步骤,分别以L个不同类型的数据库存储所述M个数据,所述L个数据库包括图数据库,L为大于1的整数;测试步骤,从2-D1的范围内选取一深度测试值,以所述深度测试值为关系深度分别在所述L个数据库中查询所述M个数据,得到L个查询时长和,确定其中最小的查询时长和对应的数据库;重复上述测试步骤,在深度测试值大于等于D2,最小的查询时长和对应的数据库均为图数据库时,确定所述取值区间的上限为D2。本专利技术实施例还提供了一种基于图数据库的数据处理装置,包括:获取模块,用于获取图数据库的待处理数据;计算模块,用于计算所述待处理数据的关系深度;存储模块,用于在所述待处理数据的关系深度大于预设的关系阈值时,将所述待处理数据进行语义化后存储在所述图数据库中。进一步地,所述存储模块还用于在所述待处理数据的关系深度不大于所述预设的关系阈值时,将所述待处理数据存储在关系数据库或键值数据库中。进一步地,所述计算模块包括:查找单元,用于查找与所述待处理数据关联的关联数据;最短路径计算单元,用于分别计算所述待处理数据与每一关联数据之间的最短路径;确定单元,用于从计算出的所有最短路径中确定一最大值作为所述待处理数据的关系深度。进一步地,所述待处理数据包括以下至少一种:待存储在所述图数据库中的数据;与所述图数据库中待删除的数据直接关联的数据。进一步地,所述获取模块还用于获取所述待处理数据的修改数据;所述存储模块还用于将所述修改数据进行语义化后存储在所述图数据库中。进一步地,还包括:关系阈值设置模块,用于确定所述关系阈值的取值区间;从所述取值区间内选取一关系阈值测试值,以所述关系阈值测试值为关系深度N次读取所述图数据库中的数据,计算N次读取所需要的时间和,重复该步骤,得到所述取值区间内每一关系阈值测试值对应的时间和,N为正整数;确定与最小的时间和对应的关系阈值测试值作为所述关系阈值。进一步地,还包括取值区间上限确定模块,所述取值区间上限确定模块包括:选取数据单元,用于选取M个数据,所述M个数据的关系深度均大于等于预设阈值D1,D1为大于2的整数;存储单元,用于分别以L个不同类型的数据库存储所述M个数据,所述L个数据库包括图数据库;测试单元,用于从2-D1的范围内选取一深度测试值,以所述深度测试值为关系深度分别在所述L个数据库中查询所述M个数据,得到L个查询时长和,确定其中最小的查询时长和对应的数据库;确定单元,用于在深度测试值大于等于D2,最小的查询时长和对应的数据库均为图数据库时,确定所述取值区间的上限为D2。本专利技术实施例还提供了一种基于图数据库的数据处理设备,包括:处理器;和存储器,在所述存储器中存储有计算机程序指令,其中,在所述计算机程序指令被所述处理器运行时,使得所述处理器执行如上所述的基于图数据库的数据处理方法中的步骤。本专利技术实施例还提供了一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,所述计算机程序被处理器运行时,使得所述处理器执行如上所述的基于图数据库的数据处理方法中的步骤。本专利技术的实施例具有以下有益效果:上述方案中,在接收到待处理数据之后,首先根据待处理数据的关系深度对待处理数据进行判断,判断待处理数据是否为适合语义化存储的数据,在待处理数据的关系深度大于预设的关系阈值时,判断待处理数据为适合语义化存储的数据,将待处理数据进行语义化后存储在图数据库中,这样能够避免将不适合语义化存储的数据进行语义化处理后存储在数据库中,能够保证图数据库的查询效率。附图说明图1为本专利技术实施例基于图数据库的数据处理方法的流程示意图;图2为数据之间的关系示意图;图3为本专利技术实施例设置关系阈值的流程示意图;图4为本专利技术实施例基于图数据库的数据处理装置的结构框图;图5为本专利技术实施例基于图数据库的数据处理设备的结构框图;图6为本专利技术具体实施例在图数据库中新增数据的流程示意图;图7为本专利技术具体实施例在图数据库中修改数据的流程示意图;图8为本专利技术具体实施例在图数据库中删除数据的流程示意图。具体实施方式为使本专利技术的实施例要解决的技术问题、技术方案和优点更加清楚,下面将结合附图及具本文档来自技高网...
【技术保护点】
1.一种基于图数据库的数据处理方法,其特征在于,包括:/n获取图数据库的待处理数据;/n计算所述待处理数据的关系深度;/n在所述待处理数据的关系深度大于预设的关系阈值时,将所述待处理数据进行语义化后存储在所述图数据库中。/n
【技术特征摘要】
1.一种基于图数据库的数据处理方法,其特征在于,包括:
获取图数据库的待处理数据;
计算所述待处理数据的关系深度;
在所述待处理数据的关系深度大于预设的关系阈值时,将所述待处理数据进行语义化后存储在所述图数据库中。
2.根据权利要求1所述的基于图数据库的数据处理方法,其特征在于,还包括:
在所述待处理数据的关系深度不大于所述预设的关系阈值时,将所述待处理数据存储在关系数据库或键值数据库中。
3.根据权利要求1所述的基于图数据库的数据处理方法,其特征在于,所述计算所述待处理数据的关系深度包括:
查找与所述待处理数据关联的关联数据;
分别计算所述待处理数据与每一关联数据之间的最短路径;
从计算出的所有最短路径中确定一最大值作为所述待处理数据的关系深度。
4.根据权利要求1或2所述的基于图数据库的数据处理方法,其特征在于,所述待处理数据包括以下至少一种:
待存储在所述图数据库中的数据;
与所述图数据库中待删除的数据直接关联的数据。
5.根据权利要求1所述的基于图数据库的数据处理方法,其特征在于,将所述待处理数据进行语义化后存储在所述图数据库中之后,所述方法还包括:
获取所述待处理数据的修改数据;
将所述修改数据进行语义化后存储在所述图数据库中。
6.根据权利要求1所述的基于图数据库的数据处理方法,其特征在于,还包括设置所述关系阈值的步骤,所述设置所述关系阈值的步骤包括:
确定所述关系阈值的取值区间;
从所述取值区间内选取一关系阈值测试值,以所述关系阈值测试值为关系深度N次读取所述图数据库中的数据,计算N次读取所需要的时间和,重复该步骤,得到所述取值区间内每一关系阈值测试值对应的时间和,N为正整数;
确定与最小的时间和对应的关系阈值测试值作为所述关系阈值。
7.根据权利要求6所述的基于图数据库的数据处理方法,其特征在于,还包括确定所述取值区间的上限的步骤,所述确定所述取值区间的上限的步骤包括:
选取数据步骤,选取M个数据,所述M个数据的关系深度均大于等于预设阈值D1,D1为大于2的整数;
存储步骤,分别以L个不同类型的数据库存储所述M个数据,所述L个数据库包括图数据库,L为大于1的整数;
测试步骤,从2-D1的范围内选取一深度测试值,以所述深度测试值为关系深度分别在所述L个数据库中查询所述M个数据,得到L个查询时长和,确定其中最小的查询时长和对应的数据库;
重复上述测试步骤,在深度测试值大于等于D2,最小的查询时长和对应的数据库均为图数据库时,确定所述取值区间的上限为D2。...
【专利技术属性】
技术研发人员:曾智嵘,
申请(专利权)人:株式会社日立制作所,
类型:发明
国别省市:日本;JP
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。