数据处理方法、系统、电子设备和计算机可读存储介质技术方案

本发明专利技术实施例公开了一种数据处理方法、系统、电子设备和计算机可读存储介质，通过解析数据处理请求以获取该请求对应的处理任务，并通过加速处理器和CPU处理器以流水线的方式执行从预定的算法模型库中获取与所述处理任务匹配的算法模型，从而获取所述数据处理请求对应的数据处理结果，由此，可以扩大数据处理系统的适用范围，提高数据处理效率。

Data Processing Methods, Systems, Electronic Equipment and Computer Readable Storage Media

The embodiment of the present invention discloses a data processing method, system, electronic equipment and computer readable storage medium, which obtains the corresponding processing tasks of the request by parsing the data processing request, and pipelines the execution of the accelerator processor and CPU processor to obtain the algorithm model matching the processing tasks from the predetermined algorithm model library, thereby obtaining the number. According to the data processing results corresponding to the processing request, the application scope of the data processing system can be expanded and the data processing efficiency can be improved.

【技术实现步骤摘要】
数据处理方法、系统、电子设备和计算机可读存储介质
本专利技术涉及计算机
，更具体地，涉及一种数据处理方法、系统、电子设备和计算机可读存储介质。
技术介绍
随着计算机技术的逐步发展，数据处理的数据量增长速度日益加快，例如图片搜索、图像识别、人脸识别等图像处理技术。数据处理涉及对大量数据进行复杂的分析和计算操作，需要巨大的计算能力作为支撑。目前以加速处理器(例如GPU处理器等)为代表的新型硬件为数据的计算和分析带来了新的思路，其强大的计算能力可以提高数据处理系统的性能，因此，如何利用加速处理器有效加速数据处理是目前亟待解决的问题。
技术实现思路
有鉴于此,本专利技术实施例提供一种数据处理方法、系统、电子设备和计算机可读存储介质，以提高数据处理的适用范围和处理效率。第一方面，本专利技术实施例提供一种数据处理方法，应用于数据处理系统，所述数据处理系统包括CPU处理器和加速处理器，所述方法包括：接收数据处理请求；对所述数据处理请求进行解析以获取所述数据处理请求对应的处理任务；确定所述处理任务的执行顺序；从预定的算法模型库中获取与所述处理任务匹配的算法模型；控制所述CPU处理器和加速处理器以流本文档来自技高网...

【技术保护点】
1.一种数据处理方法，应用于数据处理系统，所述数据处理系统包括CPU处理器和加速处理器，其特征在于，所述方法包括：接收数据处理请求；对所述数据处理请求进行解析以获取所述数据处理请求对应的处理任务；确定所述处理任务的执行顺序；从预定的算法模型库中获取与所述处理任务匹配的算法模型；控制所述CPU处理器和加速处理器以流水线的方式执行与所述处理任务匹配的算法模型以获取所述数据处理请求对应的数据处理结果。

【技术特征摘要】
1.一种数据处理方法，应用于数据处理系统，所述数据处理系统包括CPU处理器和加速处理器，其特征在于，所述方法包括：接收数据处理请求；对所述数据处理请求进行解析以获取所述数据处理请求对应的处理任务；确定所述处理任务的执行顺序；从预定的算法模型库中获取与所述处理任务匹配的算法模型；控制所述CPU处理器和加速处理器以流水线的方式执行与所述处理任务匹配的算法模型以获取所述数据处理请求对应的数据处理结果。2.根据权利要求1所述的数据处理方法，其特征在于，在控制所述CPU处理器和加速处理器以流水线的方式执行与所述处理任务匹配的算法模型之前，所述方法还包括：根据所述处理任务的计算量及依赖关系进行任务调度，以分配计算资源。3.根据权利要求1所述的数据处理方法，其特征在于，所述从预定的算法模型库中获取与所述处理任务匹配的算法模型包括：比较所述处理任务在所述预定的算法模型库中对应的多个算法模型，以确定与所述被分配的处理任务匹配的算法模型。4.根据权利要求1所述的数据处理方法，其特征在于，所述确定所述处理任务的执行顺序包括：根据所述处理任务之间的依赖关系确定所述处理任务的执行顺序。5.根据权利要求1所述的数据处理方法，其特征在于，所述方法还包括：响应于所述数据处理结果，更新对应的数据库的数据索引。6.根据权利要求5所述的数据处理方法，其特征在于，所述方法还包括：获取数据访问热度，所述数据访问热度包括预定时间段的数据访问频率和/或数据的历史访问次数；根据所述数...

【专利技术属性】
技术研发人员：谢超，郭人通，易小萌，陈婉琴，
申请(专利权)人：上海赜睿信息科技有限公司，
类型：发明
国别省市：上海,31