数据处理方法、装置及系统制造方法及图纸

一种数据处理方法、装置及系统，属于计算机技术领域。该方法用于数据处理系统中的目标处理节点，数据处理系统包括：第一中转节点、至少一个请求节点和至少一个处理节点，目标处理节点为至少一个处理节点中的任一处理节点，该方法包括：目标处理节点接收第一中转节点发送的数据处理请求，数据处理请求由目标请求节点根据数据处理系统的待处理数据发送给第一中转节点，目标请求节点为至少一个请求节点中的任一请求节点；目标处理节点执行数据处理请求所请求的数据处理操作；目标处理节点将数据处理操作的处理结果传输至目标请求节点。本申请解决了目前数据处理的方式较为单一的问题，本申请用于数据的处理。申请用于数据的处理。申请用于数据的处理。

【技术实现步骤摘要】
数据处理方法、装置及系统


[0001]本申请涉及计算机
，特别涉及一种数据处理方法、装置及系统。

技术介绍

[0002]随着计算机技术的发展，数据处理成为各种领域中必不可少的一个环节。比如，在物联网领域中，多个物联网设备通常采用不同格式的数据，因此就需要对这些不同格式的数据进行处理，以统一这些数据的格式。
[0003]相关技术中，采用一台数据处理设备接收待处理的数据，并对该数据进行处理。比如，采用一台数据处理设备接收多个物联网设备发送的不同格式的数据，并由该数据处理设备对接收到的每个数据进行格式转换，以将这些数据的格式均转换为统一的格式。
[0004]但是，目前数据处理的方式较为单一。

技术实现思路

[0005]本申请提供了一种数据处理方法、装置及系统，可以解决目前数据处理的方式较为单一的问题，所述技术方案如下：
[0006]第一方面，提供了一种数据处理方法，所述方法用于数据处理系统中的目标处理节点，所述数据处理系统包括：第一中转节点、至少一个请求节点和至少一个处理节点，所述目标处理节点为所述至少一本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种数据处理方法，其特征在于，所述方法用于数据处理系统中的目标处理节点，所述数据处理系统包括：第一中转节点、至少一个请求节点和至少一个处理节点，所述目标处理节点为所述至少一个处理节点中的任一处理节点，所述方法包括：接收所述第一中转节点发送的数据处理请求，所述数据处理请求由目标请求节点根据所述数据处理系统的待处理数据发送给所述第一中转节点，所述目标请求节点为所述至少一个请求节点中的任一请求节点；执行所述数据处理请求所请求的数据处理操作；将所述数据处理操作的处理结果传输至所述目标请求节点。2.根据权利要求1所述的方法，其特征在于，所述数据传输系统还包括第二中转节点，将所述数据处理操作的处理结果传输至所述目标请求节点，包括：向所述第二中转节点发送所述处理结果；向所述第一中转节点发送所述数据处理请求的数据处理响应，以便于所述第一中转节点向所述目标请求节点发送所述数据处理响应，以及所述目标请求节点根据所述数据处理响应从所述第二中转节点获取所述处理结果，所述数据处理响应用于指示已得到所述处理结果。3.根据权利要求1或2所述的方法，其特征在于，所述数据处理请求携带有：所述数据处理请求对应的脚本的标识；所述数据处理请求对应的脚本为：执行所述数据处理请求所请求的数据处理操作所需运行的脚本；执行所述数据处理请求所请求的数据处理操作，包括：利用所述处理节点中已创建的用于运行所述数据处理请求对应的脚本的处理单元执行所述数据处理操作。4.根据权利要求3所述的方法，其特征在于，所述第一中转节点发送的数据处理请求包括：对应同一脚本的不同数据处理请求；所述不同数据处理请求所请求的数据处理操作由同一所述处理单元执行。5.根据权利要求3或4所述的方法，其特征在于，所述方法还包括：多次确定最近的第一时间段内接收到的所述数据处理请求的第一个数；在所述第一个数的增长率大于第一概率阈值时，增加所述目标处理节点中的所述处理单元，所述第一概率阈值大于零；在所述第一个数的增长率小于第二概率阈值时，减少所述目标处理节点中的所述处理单元，所述第二概率阈值小于零。6.根据权利要求3至5任一所述的方法，其特征在于，所述方法还包括：多次确定最近的第二时间段内接收到的对应同一脚本的所述数据处理请求的第二个数；在所述第二个数的增长率大于第三概率阈值时，增加所述目标处理节点中用于运行所述同一脚本的处理单元，所述第三概率阈值大于零；在所述第二个数的增长率小于第四概率阈值时，减少所述目标处理节点中用于运行所述同一脚本的处理单元，所述第四概率阈值小于零。7.根据权利要求5或6所述的方法，其特征在于，所述数据处理系统还包括：第二中转节点，所述目标处理节点用于：
在所述处理节点中增加m个处理单元时，执行x次脚本获取操作，以得到所述m个处理单元用于运行的n个脚本；其中，m≥x≥n≥1；一次所述脚本获取操作对应所述n个脚本中的一个脚本，所述脚本获取操作用于：在所述目标处理单元的内存中存储有对应的脚本时，从所述内存中获取所述对应的脚本；在所述内存中未存储有所述对应的脚本时，向所述第二中转节点发送所述对应的脚本的获取请求，并接收所述第二中转节点根据所述获取请求发送的所述对应的脚本；根据所述n个脚本，创建所述m个处理单元。8.根据权利要求7所述的方法，其特征在于，m＞x＝n。9.根据权利要求7或8所述的方法，其特征在于，所述方法还包括：统计所述内存和所述第二中转节点上存储的各个脚本被运行的频率；当所述第二中转节点中存储的第一脚本被运行的频率大于第一频率阈值时，将所述第一脚本从所述第二中转节点中移动至所述内存；当所述内存中存储的第二脚本被运行的频率大于第二频率阈值且小于或等于所述第一频率阈值时，将所述第二脚本从所述内存中移动至所述第二中转节点。10.根据权利要求3至9任一所述的方法，其特征在于，在执行所述数据处理请求所请求的数据处理操作之前，所述方法还包括：在接收到所述第一中转节点发送的多个数据处理请求时，利用多个线程并行根据所述多个数据处理请求，确定所述处理节点中分别用于运行所述多个数据处理请求对应的脚本的处理单元。11....

【专利技术属性】
技术研发人员：于洪达，杜洪军，李涛，王怀亮，郑海涛，纪高，李世野，李国旗，李志，
申请(专利权)人：京东方科技集团股份有限公司，
类型：发明
国别省市：