System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 数据处理方法、装置、计算机可读存储介质及电子设备制造方法及图纸_技高网

数据处理方法、装置、计算机可读存储介质及电子设备制造方法及图纸

技术编号:40665477 阅读:5 留言:0更新日期:2024-03-18 18:59
本发明专利技术公开了一种数据处理方法、装置、计算机可读存储介质及电子设备。该方法包括:获取多个脚本的数据需求信息,其中,数据需求信息至少包括脚本需要订阅的信息主题的主题标识;对于所有数据需求信息中不同的主题标识所对应的信息主题,创建不同的信息消费模块;通过各个信息消费模块从信息消费模块对应的信息主题中获取数据,并将获取到的数据的内容发送至多个脚本。本发明专利技术解决了相关技术中多个脚本在运行时各自读取相同的数据,从而导致资源浪费的技术问题。

【技术实现步骤摘要】

本专利技术涉及数据处理领域,具体而言,涉及一种数据处理方法、装置、计算机可读存储介质及电子设备


技术介绍

1、在实际的业务系统中,通常会运行多个脚本,这些脚本可能运行在同一个进程中,并可能读取相同的数据流以进行不同的事件处理。由于脚本本身是相互独立的,一个脚本无法感知其他脚本的存在,所以脚本之间是无法共享资源的。即在读取数据时,每个脚本将各自读取一遍相同的数据,随着脚本数量的增加,内存和io(input/output,输入/输出)资源也会呈现线性增加的趋势,由于读取的数据是完全相同的,这些增加的内存和io资源大多是毫无意义的资源浪费。

2、针对上述的问题,目前尚未提出有效的解决方案。


技术实现思路

1、本专利技术实施例提供了一种数据处理方法、装置、计算机可读存储介质及电子设备,以至少解决相关技术中多个脚本在运行时各自读取相同的数据,从而导致资源浪费的技术问题。

2、根据本专利技术实施例的一个方面,提供了一种数据处理方法,包括:获取多个脚本的数据需求信息,其中,数据需求信息至少包括脚本需要订阅的信息主题的主题标识;对于所有数据需求信息中不同的主题标识所对应的信息主题,创建不同的信息消费模块;通过各个信息消费模块从信息消费模块对应的信息主题中获取数据,并将获取到的数据的内容发送至多个脚本。

3、进一步地,数据处理方法还包括:对于每个数据需求信息,判断第一映射表中是否存在数据需求信息中的主题标识,其中,第一映射表用于记录主题标识与信息消费模块之间的映射关系;在第一映射表中不存在数据需求信息中的主题标识的情况下,在第一映射表中新增主题标识,并创建与主题标识所属的信息主题对应的信息消费模块。

4、进一步地,数据处理方法还包括:获取第二映射表,其中,第二映射表用于记录各个脚本与主题标识之间的映射关系;对于获取到的每个数据,根据数据所属的信息主题以及第二映射表,从多个脚本中确定至少一个目标脚本;将数据的内容发送至至少一个目标脚本,以实现将获取到的数据的内容发送至多个脚本。

5、进一步地,数据处理方法还包括:对于每个数据需求信息,判断第二映射表中是否存在数据需求信息中的主题标识;在第二映射表中存在数据需求信息中的主题标识的情况下,建立数据需求信息匹配的脚本与主题标识之间的映射关系;在第二映射表中不存在数据需求信息中的主题标识的情况下,在第二映射表中新增主题标识,并建立数据需求信息匹配的脚本与主题标识之间的映射关系。

6、进一步地,数据处理方法还包括:获取第三映射表,并从第三映射表中确定各个目标脚本进行数据传输所需的数据通道,其中,第三映射表用于记录各个脚本与数据通道之间的映射关系;通过至少一个目标脚本所对应的数据通道,将数据的内容发送至至少一个目标脚本。

7、进一步地,数据处理方法还包括:对于每个目标脚本,判断第三映射表中是否存在目标脚本匹配的数据分区的分区标识;在第三映射表中存在目标脚本匹配的分区标识的情况下,确定数据中各条子数据的分区信息;依据分区信息从数据中确定属于目标脚本匹配的数据分区的子数据,得到目标子数据,并通过目标脚本所对应的数据通道将目标子数据发送至目标脚本。

8、进一步地,数据处理方法还包括:对于每个数据需求信息,从数据需求信息中确定数据需求信息匹配的脚本所对应的数据通道;在第三映射表中创建数据需求信息匹配的脚本与数据通道的映射关系;判断数据需求信息中是否存在数据分区的分区标识;在数据需求信息中存在分区标识的情况下,在第三映射表中创建数据需求信息匹配的脚本与分区标识的映射关系。

9、根据本专利技术实施例的另一方面,还提供了一种数据处理装置,包括:获取模块,用于获取多个脚本的数据需求信息,其中,数据需求信息至少包括脚本需要订阅的信息主题的主题标识;第一创建模块,用于对于所有数据需求信息中不同的主题标识所对应的信息主题,创建不同的信息消费模块;发送模块,用于通过各个信息消费模块从信息消费模块对应的信息主题中获取数据,并将获取到的数据的内容发送至多个脚本。

10、根据本专利技术实施例的另一方面,还提供了一种计算机可读存储介质,计算机可读存储介质中存储有计算机程序,其中,计算机程序被设置为运行时执行上述的数据处理方法。

11、根据本专利技术实施例的另一方面,还提供了一种电子设备,电子设备包括一个或多个处理器;存储器,用于存储一个或多个程序,当一个或多个程序被一个或多个处理器执行时,使得一个或多个处理器实现用于运行程序,其中,程序被设置为运行时执行上述的数据处理方法。

12、在本专利技术实施例中,采用在多个脚本需要获取相同数据的情况下共享同一个信息消费模块的方式,通过获取多个脚本的数据需求信息,然后对于所有数据需求信息中不同的主题标识所对应的信息主题,创建不同的信息消费模块,从而通过各个信息消费模块从信息消费模块对应的信息主题中获取数据,并将获取到的数据的内容发送至多个脚本。其中,数据需求信息至少包括脚本需要订阅的信息主题的主题标识。

13、在上述过程中,通过获取多个脚本的数据需求信息,实现了对各个脚本需要获取的数据的有效确定,通过对于所有数据需求信息中不同的主题标识所对应的信息主题,创建不同的信息消费模块,实现了在多个脚本需要获取相同数据的情况下共享同一个信息消费模块,从而可以避免存在冗余的信息消费模块,减少内存资源浪费。通过利用信息消费模块实现数据获取并将数据转达给脚本,避免了多个脚本均执行数据读取时浪费io资源,从而更进一步地减少了资源浪费。

14、由此可见,本申请所提供的方案达到了在多个脚本需要获取相同数据的情况下共享同一个信息消费模块的目的,从而实现了减少资源浪费的技术效果,进而解决了相关技术中多个脚本在运行时各自读取相同的数据,从而导致资源浪费的技术问题。

本文档来自技高网...

【技术保护点】

1.一种数据处理方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,对于所有数据需求信息中不同的主题标识所对应的信息主题,创建不同的信息消费模块,包括:

3.根据权利要求1或2所述的方法,其特征在于,将获取到的数据的内容发送至所述多个脚本,包括:

4.根据权利要求3所述的方法,其特征在于,所述第二映射表通过以下方式生成:

5.根据权利要求3所述的方法,其特征在于,将所述数据的内容发送至所述至少一个目标脚本,包括:

6.根据权利要求5所述的方法,其特征在于,所述信息主题包括至少一个数据分区,所述第三映射表还用于记录至少一个脚本与信息主题中数据分区的映射关系,其中,通过所述至少一个目标脚本所对应的数据通道,将所述数据的内容发送至所述至少一个目标脚本,包括:

7.根据权利要求6所述的方法,其特征在于,所述数据需求信息中包括所述脚本进行数据传输所需的数据通道,所述第三映射表通过以下方式生成:

8.一种数据处理装置,其特征在于,包括:

9.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质中存储有计算机程序,其中,所述计算机程序被设置为运行时执行所述权利要求1至7任一项中所述的数据处理方法。

10.一种电子设备,其特征在于,所述电子设备包括一个或多个处理器;存储器,用于存储一个或多个程序,当所述一个或多个程序被所述一个或多个处理器执行时,使得所述一个或多个处理器实现用于运行程序,其中,所述程序被设置为运行时执行所述权利要求1至7任一项中所述的数据处理方法。

...

【技术特征摘要】

1.一种数据处理方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,对于所有数据需求信息中不同的主题标识所对应的信息主题,创建不同的信息消费模块,包括:

3.根据权利要求1或2所述的方法,其特征在于,将获取到的数据的内容发送至所述多个脚本,包括:

4.根据权利要求3所述的方法,其特征在于,所述第二映射表通过以下方式生成:

5.根据权利要求3所述的方法,其特征在于,将所述数据的内容发送至所述至少一个目标脚本,包括:

6.根据权利要求5所述的方法,其特征在于,所述信息主题包括至少一个数据分区,所述第三映射表还用于记录至少一个脚本与信息主题中数据分区的映射关系,其中,通过所述至少一个目标脚本所对应的数据通道,将所述数据的内...

【专利技术属性】
技术研发人员:秦利斌沈捷黄平项周坤何珂
申请(专利权)人:山石网科通信技术股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1