一种大数据处理方法及其装置制造方法及图纸
A large data processing method and its device
The invention discloses a large data processing method and a device. The method comprises: acquiring at least one of the first big data; distributed processing of the at least one of the first big data through the data processor, the data processing, the data processor according to the parameter information of the first big data, determining the first big data characteristics, and according to the first big data characteristics of data processing of the first big data processor. Based on the distributed processing of at least one first big data, the huge amount of data is processed. Further, the data is processed by the data processor to achieve the accurate processing of the big data.
【技术实现步骤摘要】
一种大数据处理方法及其装置
本专利技术涉及计算机技术，尤指一种大数据处理方法及其装置。
技术介绍
随着现在科技的发展，各行各业都会产生大量数据，进一步，随着各行各业规模的蓬勃发展，产生的数据以几何倍数爆炸式增长，从而产生人们常说的大数据。通常，获取的大数据具有数据规模大、流转速度高、类型多种多样和价值密度比较低的特点，也就是说，该些数据不仅数据量大，而且数据之间无序，非关系型，导致现有技术无法在一时间范围内完成对大数据的处理。
技术实现思路
为了解决上述技术问题，本专利技术提供了一种大数据处理方法及其装置，用以解决无法在一时间范围内完成对大数据的处理的问题。为了达到本专利技术目的，本专利技术提供了一种大数据处理理方法，包括：获取至少一个第一大数据；采用分布式处理将所述至少一个第一大数据通过数据处理器进行处理，获得数据处理结果，所述数据处理器用于根据所述第一大数据的参数信息，确定所述第一大数据特性，并根据所述第一大数据特性对所述第一大数据进行数据处理的处理器。进一步的，所述获取至少一个第一大数据之前，还包括：获取至少一个第二大数据；根据所述至少一个第二大数据的各维度参数...
【技术保护点】
一种大数据处理方法，其特征在于，包括：获取至少一个第一大数据；采用分布式处理将所述至少一个第一大数据通过数据处理器进行处理，获得数据处理结果，所述数据处理器用于根据所述第一大数据的参数信息，确定所述第一大数据特性，并根据所述第一大数据特性对所述第一大数据进行数据处理的处理器。
【技术特征摘要】
1.一种大数据处理方法，其特征在于，包括：获取至少一个第一大数据；采用分布式处理将所述至少一个第一大数据通过数据处理器进行处理，获得数据处理结果，所述数据处理器用于根据所述第一大数据的参数信息，确定所述第一大数据特性，并根据所述第一大数据特性对所述第一大数据进行数据处理的处理器。2.根据权利要求1所述的方法，其特征在于，所述获取至少一个第一大数据之前，还包括：获取至少一个第二大数据；根据所述至少一个第二大数据的各维度参数，确定所述数据处理器。3.根据权利要求2所述的方法，其特征在于，所述获取至少一个第一大数据之后，还包括：将所述至少一个第一大数据进行分布式存储。4.根据权利要求3所述的方法，其特征在于，所述将所述至少一个第一大数据进行分布式存储，包括：将所述至少一个第一大数据存储在分布式数据库。5.根据权利要求1-4任一项所述的方法，其特征在于，所述采用分布式处理将所述至少一个第一大数据通过数据处理器进行处理，获得数据处理结果之后，还包括...
【专利技术属性】
技术研发人员：杨吉东，
申请(专利权)人：郑州云海信息技术有限公司，
类型：发明
国别省市：河南,41
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。