【技术实现步骤摘要】
一种数据更新方法、装置及服务器
本专利技术涉及大数据处理
,具体而言,涉及一种数据更新方法、装置及服务器。
技术介绍
大数据在现如今的社会生产生活中扮演着越来越重要的角色,人们可以利用大数据进行多种多样的业务处理。常见的基于大数据的业务处理机制为请求响应机制:业务终端向大数据服务器发起业务处理请求,大数据服务器响应业务处理请求并进行相应的数据业务处理,然后将处理结果返回给业务终端。但随着大数据服务器对接的业务终端数量的增加,业务终端在向大数据服务器发送了业务处理请求之后,难以及时地获得大数据服务器返回的处理结果。
技术实现思路
为了改善上述问题,本专利技术提供了一种数据更新方法、装置及服务器。本专利技术实施例的第一方面,提供了一种数据更新方法,应用于服务器,所述服务器与业务终端通信,所述方法包括:按照设定时长间隔从运行日志中读取业务终端的至少部分第一业务请求,确定每个第一业务请求的业务类型,所述第一业务请求为业务终端在当前时刻之前向服务器发送的业务请求,所述业务类型用于表征所述第一业 ...
【技术保护点】
1.一种数据更新方法,其特征在于,应用于服务器,所述服务器与业务终端通信,所述方法包括:/n按照设定时长间隔从运行日志中读取业务终端的至少部分第一业务请求,确定每个第一业务请求的业务类型,所述第一业务请求为业务终端在当前时刻之前向服务器发送的业务请求,所述业务类型用于表征所述第一业务请求对应的数据业务处理类型;/n确定每个业务类型在至少部分业务类型中的占比,按照所述占比的由大到小顺序对所述业务类型进行排序得到第一排序序列;/n从预设的数据集合中确定每个业务类型对应的数据组,并按照所述第一排序序列为每个数据组进行排序得到第二排序序列;/n根据每个数据组在所述第二排序序列中的相 ...
【技术特征摘要】
1.一种数据更新方法,其特征在于,应用于服务器,所述服务器与业务终端通信,所述方法包括:
按照设定时长间隔从运行日志中读取业务终端的至少部分第一业务请求,确定每个第一业务请求的业务类型,所述第一业务请求为业务终端在当前时刻之前向服务器发送的业务请求,所述业务类型用于表征所述第一业务请求对应的数据业务处理类型;
确定每个业务类型在至少部分业务类型中的占比,按照所述占比的由大到小顺序对所述业务类型进行排序得到第一排序序列;
从预设的数据集合中确定每个业务类型对应的数据组,并按照所述第一排序序列为每个数据组进行排序得到第二排序序列;
根据每个数据组在所述第二排序序列中的相对位置,为每个数据组分配数据恢复频率;
按照所述数据恢复频率将至少部分数据组调取至数据恢复线程以通过所述数据恢复线程对至少部分数据组进行数据恢复得到至少部分业务数据组;
将至少部分目标数据集更新至业务数据区间并返回按照所述数据恢复频率将至少部分数据组调取至数据恢复线程的步骤以实现所述业务数据区间内的业务数据组的循环更新。
2.根据权利要求1所述的方法,其特征在于,所述按照所述数据恢复频率将至少部分数据组调取至数据恢复线程以通过所述数据恢复线程对至少部分数据组进行数据恢复得到至少部分业务数据组,包括:
根据每个数据组对应的数据恢复频率对所述数据组进行聚类得到多个类别,每个类别下包括至少两个数据组;
根据每个类别下包括的数据组的数据恢复频率为每个类别分配类别标识,所述类别标识具有从高到低的层级顺序;
确定所述数据恢复线程的负载容量,所述负载容量用于表征同时进行数据恢复的数据组的最大数量;
根据所述负载容量以及所述类别标识将至少一个类别下的数据组调取至所述数据恢复线程以通过所述数据恢复线程对至少一个类别下的数据组进行数据恢复得到至少一个类别下的数据组对应的业务数据组。
3.根据权利要求2所述的方法,其特征在于,所述根据所述负载容量以及所述类别标识将至少一个类别下的数据组调取至所述数据恢复线程,包括:
根据所述负载容量对应的同时进行数据恢复的数据组的最大数量,对所述类别标识进行区间划分得到多个类别区间,每个类别区间对应的数据组的累计数量小于等于所述最大数量;
根据每个类别区间中的类别对应的类别标识的均值为每个类别区间设置区间标识;
按照区间标识由大到小的顺序循环地将每个类别区间中的数据组调取至所述数据恢复线程。
4.根据权利要求1-3任一项所述的方法,其特征在于,所述通过所述数据恢复线程对至少部分数据组进行数据恢复得到至少部分业务数据组,包括:
针对至少部分数据组中的每个数据组,根据该数据组中数据串的数据特征,获得该数据组的特征分布;
确定所述特征分布中每个特征节点在所述特征分布中的位置权重,所述位置权重用于表征每个特征节点与特征分布的中心节点之间的距离;
根据所述位置权重由大到小的顺序将该数据组中的数据串依次加载至所述数据恢复线程中以得到每个数据串的特征向量;
运行所述数据恢复线程以对每个特征向量中的每个向量值确定关联值,所述关联值与向量值之间的匹配度大于等于设定值,根据每个特征向量对应的关联值得到关联向量并基于所述关联向量对每个特征向量进行扩维处理得到目标向量;从所述数据恢复线程中抽取每个目标向量并基于预设的向量值数据库确定每个目标向量中的每个目标向量值对应的业务数据串;按照所述目标向量中的目标向量值的排布顺序将所述业务数据串组合成该数据组的对应业务数据组。
5.一种数据更新装置,其特征在于,应用于服务器,所述服务器与业务终端通信,所述装置包括:
类型确定模块,用于按照设定时长...
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。