一种数据处理方法、系统和相关装置制造方法及图纸

本申请公开了一种数据处理方法、系统和相关装置，通过云侧系统向边缘侧系统发送包括目标文件的文件地址和目标模型的模型地址的目标处理任务，通过边缘侧系统根据文件地址获取目标文件及根据模型地址获取目标模型，以便边缘侧系统利用目标模型对目标文件进行处理，得到目标文件对应的结构化数据。其中，云侧系统用于向边缘侧系统下发目标处理任务，边缘侧系统用于完成目标处理任务，由于边缘侧系统接收到目标处理任务后，是先根据文件地址获取目标文件及根据模型地址获取目标模型，再利用目标模型对目标文件进行处理以完成目标处理任务，基于此，边缘侧系统无需存储目标文件及目标模型，由此能够降低对边缘侧系统的硬件资源的要求，从而降低成本。从而降低成本。从而降低成本。

【技术实现步骤摘要】
一种数据处理方法、系统和相关装置


[0001]本申请涉及数据处理
，特别是涉及一种数据处理方法、系统和相关装置。

技术介绍

[0002]随着人工智能技术的发展，出现了大量的远程监控、远程维护等应用。比如在智慧交通领域的应用，通过安装在道路上的监控设备实现远程监控。
[0003]这些应用在运行时的数据处理过程由于具有高并发等特点，通常面临宽带和处理时延的问题，为此，可以通过在边缘侧系统部署边缘设备，由于边缘设备靠近端侧，能够大大降低宽度并提高实时性。具体的，边缘侧系统中的边缘设备与云侧系统，基于云边协同以实时进行这些应用在运行时的数据处理。
[0004]相关技术中，基于云边协同的处理方式对边缘设备的硬件资源要求较高，导致成本较高等问题。

技术实现思路

[0005]为了解决上述技术问题，本申请提供了一种数据处理方法、系统和相关装置，能够降低对边缘侧系统的硬件资源的要求以及降低成本。
[0006]本申请实施例公开了如下技术方案：
[0007]一方面，本申请实施例提供了一种数据处理方法，所述方法包括：
[0008]通过云侧系统向边缘侧系统发送目标处理任务；所述目标处理任务包括目标文件的文件地址和目标模型的模型地址，所述目标模型用于对所述目标文件进行处理；
[0009]通过所述边缘侧系统根据所述文件地址获取所述目标文件，通过所述边缘侧系统根据所述模型地址获取所述目标模型；
[0010]通过所述边缘侧系统利用所述目标模型对所述目标文件进行处理，得到所述目标文件对应的结构化数据。
[0011]另一方面，本申请实施例提供了一种数据处理系统，所述系统包括云侧系统和边缘侧系统：
[0012]所述云侧系统，用于向所述边缘侧系统发送目标处理任务；所述目标处理任务包括目标文件的文件地址和目标模型的模型地址，所述目标模型用于对所述目标文件进行处理；
[0013]所述边缘侧系统，用于根据所述文件地址获取所述目标文件，根据所述模型地址获取所述目标模型；
[0014]所述边缘侧系统，还用于利用所述目标模型对所述目标文件进行处理，得到所述目标文件对应的结构化数据。
[0015]又一方面，本申请实施例提供了一种数据处理装置，所述装置包括发送单元、获取单元和处理单元：
[0016]所述发送单元，用于通过云侧系统向边缘侧系统发送目标处理任务；所述目标处
理任务包括目标文件的文件地址和目标模型的模型地址，所述目标模型用于对所述目标文件进行处理；
[0017]所述获取单元，用于通过所述边缘侧系统根据所述文件地址获取所述目标文件，通过所述边缘侧系统根据所述模型地址获取所述目标模型；
[0018]所述处理单元，用于通过所述边缘侧系统利用所述目标模型对所述目标文件进行处理，得到所述目标文件对应的结构化数据。
[0019]又一方面，本申请实施例提供了一种计算机可读存储介质，所述计算机可读存储介质用于存储计算机程序，所述计算机程序用于执行以上方面所述的数据处理方法。
[0020]由上述技术方案可以看出，可以通过云侧系统向边缘侧系统发送包括目标文件的文件地址和目标模型的模型地址的目标处理任务，其中，目标模型用于对目标文件进行处理，进而可以通过边缘侧系统根据文件地址获取目标文件以及根据模型地址获取目标模型，以便于边缘侧系统利用目标模型对目标文件进行处理，得到目标文件对应的结构化数据。可见，提供了一种基于云侧系统和边缘侧系统协同的数据处理方法，其中，云侧系统用于向边缘侧系统下发目标处理任务，边缘侧系统用于完成目标处理任务，由于目标处理任务中包括目标文件的文件地址和目标模型的模型地址，边缘侧系统接收到目标处理任务之后，是先根据文件地址获取目标文件以及根据模型地址获取目标模型，再利用目标模型对目标文件进行处理以完成目标处理任务，基于此，边缘侧系统无需存储目标文件以及目标模型，由此能够降低对边缘侧系统的硬件资源的要求，从而降低成本。
附图说明
[0021]为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
[0022]图1为本申请实施例提供的一种数据处理方法的流程图；
[0023]图2为本申请实施例提供的一种数据处理系统的示意图；
[0024]图3为本申请实施例提供的一种数据处理装置的结构图。
具体实施方式
[0025]为了使本
的人员更好地理解本申请方案，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
[0026]随着人工智能技术的发展，出现了大量的远程监控、远程维护等应用。比如在智慧交通领域的应用，通过安装在道路上的监控设备实现远程监控。这些应用在运行时的数据处理过程由于具有高并发等特点，通常面临宽带和处理时延的问题，为此，可以通过在边缘侧系统部署边缘设备，由于边缘设备靠近端侧，能够大大降低宽度并提高实时性。具体的，边缘侧系统中的边缘设备与云侧系统，基于云边协同以实时进行这些应用在运行时的数据处理。
[0027]相关技术中，基于云边协同的处理方式中，边缘设备集计算、存储及管理于一体。由于边缘设备属于低功耗、低资源的硬件设备，因此相关技术中集计算、存储及管理于一体的方式使得对边缘设备的硬件资源的要求大大提高，增加成本，同时，增加了对边缘设备运维管理的复杂度，尤其在边缘侧系统中部署的边缘设备数量众多时，运维成本较高。
[0028]为此，本申请提供了本申请提供了一种数据处理方法、系统和相关装置，能够降低对边缘侧系统的硬件资源的要求以及降低成本。
[0029]本申请实施例所提供的数据处理方法可以通过计算机设备实施，该计算机设备可以是终端设备或服务器，其中，服务器可以是独立的物理服务器，也可以是多个物理服务器构成的服务器集群或者分布式系统，还可以是提供云计算服务的云服务器。终端设备包括但不限于手机、电脑、智能语音交互设备、智能家电、车载终端等。终端设备以及服务器可以通过有线或无线通信方式进行直接或间接地连接，本申请对此不做任何限制。
[0030]具体通过如下实施例进行说明：
[0031]图1为本申请实施例提供的一种数据处理方法的流程图，以服务器作为前述计算机设备为例进行说明，所述方法包括S101
‑
S103：
[0032]S101：通过云侧系统向边缘侧系统发送目标处理任务。
[0033]在数据处理过程中，可以通过云侧系统向边缘侧系统发送目标处理任务，该目标处理任务中包括目标文件的文件地址和目标模型的模型地址本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种数据处理方法，其特征在于，所述方法包括：通过云侧系统向边缘侧系统发送目标处理任务；所述目标处理任务包括目标文件的文件地址和目标模型的模型地址，所述目标模型用于对所述目标文件进行处理；通过所述边缘侧系统根据所述文件地址获取所述目标文件，通过所述边缘侧系统根据所述模型地址获取所述目标模型；通过所述边缘侧系统利用所述目标模型对所述目标文件进行处理，得到所述目标文件对应的结构化数据。2.根据权利要求1所述的方法，其特征在于，所述通过所述边缘侧系统根据所述文件地址获取所述目标文件，包括：通过所述边缘侧系统中的边缘设备根据所述文件地址从端侧系统下载所述目标文件；所述通过所述边缘侧系统根据所述模型地址获取所述目标模型，包括：通过所述边缘设备根据所述模型地址从所述云侧系统下载目标模型。3.根据权利要求2所述的方法，其特征在于，所述方法还包括：获取所述边缘设备的剩余计算资源；根据所述剩余计算资源，通过所述云侧系统生成待处理任务；通过所述云侧系统将所述待处理任务推送至所述边缘设备的任务队列。4.根据权利要求3所述的方法，其特征在于，所述方法还包括：通过所述边缘设备从所述任务队列获取所述待处理任务；通过所述边缘设备对所述待处理任务进行解析，得到所述待处理任务对应的待处理文件的文件地址和待处理模型的模型地址；通过所述边缘设备根据所述待处理文件的文件地址从所述端侧系统下载所述待处理文件，通过所述边缘设备根据所述待处理模型的模型地址从所述云侧系统下载所述待处理模型；通过所述边缘设备利用所述待处理模型对所述待处理文件进行处理，得到所述待处理文件的结构化数据。5.根据权利要求1中任意一项所述的方法，其特征在于，所述目标文件为目标视频文件，所述方法还包括：通过所述云侧系统管理所述目标视频文件对应的视频采集设备的设备信息。6.根据权利要求5所述的方法，其特征在于，在所述...

【专利技术属性】
技术研发人员：眭建仔，杨卫民，孙廷辉，程力，陈杰，吕江波，沈小勇，
申请(专利权)人：深圳思谋信息科技有限公司，
类型：发明
国别省市：