数据处理方法、装置、设备及存储介质制造方法及图纸

技术编号:38324479 阅读:12 留言:0更新日期:2023-07-29 09:06
本公开提供了一种数据处理方法、装置、设备及存储介质,可以应用于大数据领域和数据检索领域。该方法包括:确定初始请求数据的请求类型;在请求类型为检索请求类型的情况下,提取初始请求数据中的检索数据;根据与检索数据对应的目标索引数据的索引更新属性信息,以及多个检索容器各自的容器更新时间属性,从多个检索容器中确定目标检索容器,其中,目标检索容器适用于根据检索数据执行检索任务;以及基于目标检索容器处理检索数据,得到与初始请求数据对应的目标检索结果。数据对应的目标检索结果。数据对应的目标检索结果。

【技术实现步骤摘要】
数据处理方法、装置、设备及存储介质


[0001]本公开涉及大数据领域和数据检索领域,尤其涉及一种数据处理方法、装置、设备、介质和程序产品。

技术介绍

[0002]随着科技的快速发展,相关企业越来越依赖于数据检索服务资源来实现数据检索。相关数据检索服务资源可以基于检索关键字来向客户端返回与检索关键字相关的检索结果。例如可以基于检索关键字来实施检索,并返回包含有检索关键字的文档、报表等文件,以实现帮助用户快速地查询到所需要的数据信息。
[0003]而专利技术人发现相关检索服务资源的检索相应效率较低,且可能存在检索结果出错等问题,导致难以满足用户的实际需求。

技术实现思路

[0004]鉴于上述问题,本公开提供了数据处理方法、装置、设备、介质和程序产品。
[0005]根据本公开的第一个方面,提供了一种数据处理方法,包括:
[0006]确定初始请求数据的请求类型;
[0007]在上述请求类型为检索请求类型的情况下,提取上述初始请求数据中的检索数据;
[0008]根据与上述检索数据对应的目标索引数据的索引更新属性信息,以及多个检索容器各自的容器更新时间属性,从多个上述检索容器中确定目标检索容器,其中,上述目标检索容器适用于根据上述检索数据执行检索任务;以及
[0009]基于上述目标检索容器处理上述检索数据,得到与上述初始请求数据对应的目标检索结果。
[0010]根据本公开的实施例,多个上述检索容器中包括源检索容器与至少一个镜像检索容器,上述目标检索容器从至少一个上述镜像检索容器中确定;
[0011]上述数据处理方法还包括:
[0012]在上述请求类型为索引更新请求类型的情况下,提取上述初始请求数据中的更新索引数据;
[0013]根据上述更新索引数据,更新上述源检索容器,得到更新后的目标源检索容器;以及
[0014]对上述目标源检索容器进行镜像处理,生成新的镜像检索容器。
[0015]根据本公开的实施例,上述索引更新属性信息包括索引更新频次,上述容器更新时间属性包括生成上述镜像检索容器的容器生成时刻,上述镜像检索容器包括多个;
[0016]其中,上述根据与上述检索数据对应的目标索引数据的索引更新属性信息,以及多个检索容器各自的容器更新时间属性,从多个上述检索容器中确定目标检索容器包括:
[0017]比对上述目标索引数据的索引更新频次和预设更新频次阈值,得到第一比对结
果,其中,上述第一比对结果表征上述目标索引数据的更新频次等级;
[0018]根据上述第一比对结果,从多个上述镜像检索容器各自的镜像容器生成时刻中确定目标容器生成时刻;以及
[0019]根据上述目标容器生成时刻,从多个上述镜像检索容器中确定上述目标检索容器。
[0020]根据本公开的实施例,上述索引更新属性信息包括索引更新时刻,上述容器更新时间属性包括生成上述镜像检索容器的容器生成时刻,上述镜像检索容器包括多个;
[0021]其中,上述根据与上述检索数据对应的目标索引数据的索引更新属性信息,以及多个检索容器各自的容器更新时间属性,从多个上述检索容器中确定目标检索容器包括:
[0022]在上述目标索引数据关联有多个上述索引更新时刻的情况下,从多个上述索引更新时刻中,确定距离当前时刻最近的目标索引更新时刻;
[0023]根据上述目标索引更新时刻,从多个上述镜像检索容器各自的镜像容器生成时刻中确定目标容器生成时刻;以及
[0024]根据上述目标容器生成时刻,从多个上述镜像检索容器中确定上述目标检索容器。
[0025]根据本公开的实施例,上述根据上述目标索引更新时刻,从多个上述镜像检索容器各自的镜像容器生成时刻中确定目标容器生成时刻包括:
[0026]将多个上述镜像容器生成时刻中,晚于上述目标索引更新时刻的镜像容器生成时刻确定为候选容器生成时刻;以及
[0027]在上述候选容器生成时刻包括多个的情况下,将多个上述候选容器生成时刻中,与上述目标索引更新时刻之间的时长小于预设时长阈值的候选容器生成时刻,确定为上述目标容器生成时刻。
[0028]根据本公开的实施例,上述数据处理方法还包括:
[0029]根据多个检索容器各自的容器更新时间属性,确定多个检索容器各自的待更新持续时长;
[0030]根据多个检索容器各自的待更新持续时长,从多个上述检索容器中确定待删除检索容器;以及
[0031]删除上述待删除检索容器。
[0032]根据本公开的实施例,上述确定初始请求数据的请求类型包括:
[0033]解析上述初始请求数据的初始请求头数据,得到上述请求类型。
[0034]本公开的第二方面提供了一种数据处理装置,包括:
[0035]第一确定模块,用于确定初始请求数据的请求类型;
[0036]提取模块,用于在上述请求类型为检索请求类型的情况下,提取上述初始请求数据中的检索数据;
[0037]第二确定模块,用于根据与上述检索数据对应的目标索引数据的索引更新属性信息,以及多个检索容器各自的容器更新时间属性,从多个上述检索容器中确定目标检索容器,其中,上述目标检索容器适用于根据上述检索数据执行检索任务;以及
[0038]目标检索结果获得模块,用于基于上述目标检索容器处理上述检索数据,得到与上述初始请求数据对应的目标检索结果。
[0039]本公开的第三方面提供了一种电子设备,包括:一个或多个处理器;存储器,用于存储一个或多个程序,其中,当所述一个或多个程序被所述一个或多个处理器执行时,使得一个或多个处理器执行上述方法。
[0040]本公开的第四方面还提供了一种计算机可读存储介质,其上存储有可执行指令,该指令被处理器执行时使处理器执行上述方法。
[0041]本公开的第五方面还提供了一种计算机程序产品,包括计算机程序,该计算机程序被处理器执行时实现上述方法。
[0042]根据本公开提供的数据处理方法、装置、设备、介质和程序产品,通过根据目标索引数据的索引更新属性信息和多个检索容器各自的容器更新时间属性,来确定适用于根据检索数据执行检索任务的目标检索容器,可以使目标检索容器的容器更新时间属性与索引更新属性信息相适配,从而可以适应性地选择与检索数据相适配的目标检索容器来执行检索任务,至少部分避免在海量请求数据高并发检索的情况下,通过同一检索服务器来执行检索任务造成的响应延迟、检索结果出错的技术问题,提升检索效率。
附图说明
[0043]通过以下参照附图对本公开实施例的描述,本公开的上述内容以及其他目的、特征和优点将更为清楚,在附图中:
[0044]图1示意性示出了根据本公开实施例的数据处理方法的应用场景图;
[0045]图2示意性示出了根据本公开实施例的数据处理方法的流程图;
[0046]图3示意性示出了根据本公开实施例的从多个检索容器中确定目标检索容器的流程图;
[00本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种数据处理方法,包括:确定初始请求数据的请求类型;在所述请求类型为检索请求类型的情况下,提取所述初始请求数据中的检索数据;根据与所述检索数据对应的目标索引数据的索引更新属性信息,以及多个检索容器各自的容器更新时间属性,从多个所述检索容器中确定目标检索容器,其中,所述目标检索容器适用于根据所述检索数据执行检索任务;以及基于所述目标检索容器处理所述检索数据,得到与所述初始请求数据对应的目标检索结果。2.根据权利要求1所述的方法,其中,多个所述检索容器中包括源检索容器与至少一个镜像检索容器,所述目标检索容器从至少一个所述镜像检索容器中确定;所述数据处理方法还包括:在所述请求类型为索引更新请求类型的情况下,提取所述初始请求数据中的更新索引数据;根据所述更新索引数据,更新所述源检索容器,得到更新后的目标源检索容器;以及对所述目标源检索容器进行镜像处理,生成新的镜像检索容器。3.根据权利要求2所述的方法,其中,所述索引更新属性信息包括索引更新频次,所述容器更新时间属性包括生成所述镜像检索容器的容器生成时刻,所述镜像检索容器包括多个;其中,所述根据与所述检索数据对应的目标索引数据的索引更新属性信息,以及多个检索容器各自的容器更新时间属性,从多个所述检索容器中确定目标检索容器包括:比对所述目标索引数据的索引更新频次和预设更新频次阈值,得到第一比对结果,其中,所述第一比对结果表征所述目标索引数据的更新频次等级;根据所述第一比对结果,从多个所述镜像检索容器各自的镜像容器生成时刻中确定目标容器生成时刻;以及根据所述目标容器生成时刻,从多个所述镜像检索容器中确定所述目标检索容器。4.根据权利要求2所述的方法,其中,所述索引更新属性信息包括索引更新时刻,所述容器更新时间属性包括生成所述镜像检索容器的容器生成时刻,所述镜像检索容器包括多个;其中,所述根据与所述检索数据对应的目标索引数据的索引更新属性信息,以及多个检索容器各自的容器更新时间属性,从多个所述检索容器中确定目标检索容器包括:在所述目标索引数据关联有多个所述索引更新时刻的情况下,从多个所述索引更新时刻中,确定距离当前时刻最近的目标索引更新时刻;根据所述目标索引更新时刻,...

【专利技术属性】
技术研发人员:吴宇光张荣宸陈治宇尹传威秦雯婧张元方赤邵丽杰徐志轩李洋莹
申请(专利权)人:建信金融科技有限责任公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1