数据并行处理方法及装置制造方法及图纸

本公开实施例涉及数据处理技术领域，提供一种数据并行处理方法及装置，其中，方法包括：数据请求解析步骤，对接收的综合数据请求协议转换后进行解析，得到至少两个具体数据请求，其中，所述具体数据请求设置有与基础数据库中的基础数据匹配的数据标识；具体数据请求并行处理步骤，协程调度所述具体数据请求。本公开的数据并行处理方法及装置提高了对不同语言编辑的数据请求的适用性，且多个具体数据请求可同时进行处理，提高了数据处理的效率。

Data Parallel Processing Method and Device

【技术实现步骤摘要】
数据并行处理方法及装置
本专利技术涉及数据处理
，尤其涉及一种数据并行处理方法及装置。
技术介绍
网站服务器在收到浏览器或者应用程序(Application，APP)的数据请求时，可能会遇到一个数据请求可能包含多项的基础数据。其中，网站服务器针对浏览器网页的数据请求处理http、rpc等协议的请求，而对于APP发送的数据请求，需要网站服务器基于多种其他不同的协议，处理APP发送的数据请求。网站服务器在接收到浏览器或者APP的数据请求时，可能需要从网站服务器的基础数据库中获取、处理并组合多业务数据并返回给浏览器或者APP。相关技术中，为避免网站服务器串行处理数据请求耗时长、业务处理能力较差的缺陷，利用编程语言的多进程或多线程特性去并行获取、处理业务数据的方案完全依赖于网站服务器所使用的编程语言，不同编程语言对多进程、多线程的支持程度及实现复杂度都不相同，实现成本较高，不通用，并行请求数量受内存等限制较大且不易扩展。
技术实现思路
为了解决现有技术中存在的上述问题，本专利技术提供一种数据并行处理方案。根据本专利技术实施例的其中一方面，提供一数据并行处理方法，包括：数据请求解析步骤，对接本文档来自技高网...

【技术保护点】
1.一种数据并行处理方法，其中，包括：数据请求解析步骤，对接收的综合数据请求协议转换后进行解析，得到至少两个具体数据请求，其中，所述具体数据请求设置有与基础数据库中的基础数据匹配的数据标识；具体数据请求并行处理步骤，协程调度所述具体数据请求。

【技术特征摘要】
1.一种数据并行处理方法，其中，包括：数据请求解析步骤，对接收的综合数据请求协议转换后进行解析，得到至少两个具体数据请求，其中，所述具体数据请求设置有与基础数据库中的基础数据匹配的数据标识；具体数据请求并行处理步骤，协程调度所述具体数据请求。2.根据权利要求1所述的方法，其中，所述数据请求解析步骤，包括：对所述综合数据请求进行协议转换，得到按照http协议传输的综合数据请求。3.根据权利要求1或2所述的方法，其中，所述数据请求解析步骤，包括：数据请求拆解步骤，对所述综合数据请求进行拆解，得到拆解后的数据请求；数据请求标注步骤，对所述拆解后的数据请求分别标注所述数据标识，得到所述具体数据请求。4.根据权利要求1所述的方法，其中，所述具体数据请求并行处理步骤，包括：协程创建步骤，基于系统资源与所述具体数据请求数量，创建用于处理具体数据请求的协程，得到数据请求处理协程。5.根据权利要求1所述的方法，其中，所述数据请求处理协程为基于golang的协程；所述具体数据请求并行处理步...

【专利技术属性】
技术研发人员：王江涛，
申请(专利权)人：北京创鑫旅程网络技术有限公司，
类型：发明
国别省市：北京,11