数据统计方法及装置制造方法及图纸

本申请实施例提供一种数据统计方法及装置，将至少一个统计需求场景归类为一类统计场景，至少一个统计需求场景中的每个统计需求场景的统计方式相同，针对统计场景训练统计模型，确定目标统计需求场景的目标表结构，目标表结构用于指示目标统计需求场景的统计目标，目标统计需求场景为至少一个统计需求场景中的任意一个统计需求场景，根据目标表结构与统计模型，对目标统计需求场景的统计目标进行统计。该过程中，通过抽象归类，将统计方式相同的至少一个统计需求场景归类为一类统计场景，仅针对该统计场景训练统计模型，并基于该统计模型进行数据统计以满足用户对海量数据的统计需求。

【技术实现步骤摘要】
数据统计方法及装置
本申请实施例涉及数据统计技术，尤其涉及一种数据统计方法及装置。
技术介绍
随着越来越激烈的市场竞争，数据作为业务精细化运营与管理决策的重要依据，成为驱动互联网行业的根本力量。商家通过数据统计可以准确的把握用户的品牌感知，然后针对性的进行品牌塑造。数据统计过程中，针对特定的统计需求训练统计模型，利用该统计模型对特定的需求进行数据统计。常见的数据统计包括页面浏览量(pageview，PV)、访客量(UniqueView，UV)、交易额、订单量等。然而，随着互联网的迅速发展，使得数据越来越海量，海量数据越来越不规则且处于动态变化之中，商家对数据统计的精细化要求程度越来越高，除了关注数据统计的静态结果外，更关注数据的变化趋势。显然，针对特定的统计需求训练处的统计模型，是远远无法满足用户对海信数据的统计需求的。
技术实现思路
本申请实施例提供一种数据统计方法及装置，通过抽象归类训练统计模型，基于该统计模型进行数据统计以满足用户对海量数据的统计需求。第一方面，本申请实施例提供一种数据统计方法，包括：将至少一个统计需求场景归类为一类统计场景，所述至少一个统计需求场景中的每个统计需求场景的统计方式相同；针对所述统计场景训练统计模型；确定目标统计需求场景的目标表结构，所述目标表结构用于指示所述目标统计需求场景的统计目标，所述目标统计需求场景为所述至少一个统计需求场景中的任意一个统计需求场景；根据所述目标表结构与统计模型，对所述目标统计需求场景的所述统计目标进行统计。在一种可行的设计中，所述根据所述目标表结构与统计模型，对所述目标统计需求场景的所述统计目标进行统计之前，还包括：对所述目标统计需求场景配置统计任务。在一种可行的设计中，所述统计任务指示所述目标统计需求场景的即时统计任务，所述根据所述目标表结构与统计模型，对所述目标统计需求场景的所述统计目标进行统计，包括：根据所述目标表结构与统计模型，对所述目标统计需求场景的所述统计目标进行即时统计。在一种可行的设计中，所述统计任务指示所述目标统计需求场景的定时统计任务，所述根据所述目标表结构与统计模型，对所述目标统计需求场景的所述统计目标进行统计，包括：根据所述目标表结构与统计模型，对所述目标统计需求场景的所述统计目标进行定时统计。在一种可行的设计中，所述至少一个统计需求场景包括第一统计需求场景和第二统计需求场景，所述第一统计需求场景对应的表结构和所述第二统计需求场景对应的表结构不同。第二方面，本申请实施例提供一种数据统计装置，包括：归类模块，用于将至少一个统计需求场景归类为一类统计场景，所述至少一个统计需求场景中的每个统计需求场景的统计方式相同；训练模块，用于针对所述统计场景训练统计模型；确定模块，用于确定目标统计需求场景的目标表结构，所述目标表结构用于指示所述目标统计需求场景的统计目标，所述目标统计需求场景为所述至少一个统计需求场景中的任意一个统计需求场景；统计模块，用于根据所述目标表结构与统计模型，对所述目标统计需求场景的所述统计目标进行统计。在一种可行的设计中，上述的装置还包括：配置模块，用于在所述统计模块根据所述目标表结构与统计模型，对所述目标统计需求场景的所述统计目标进行统计之前，对所述目标统计需求场景配置统计任务。在一种可行的设计中，所述统计任务指示所述目标统计需求场景的即时统计任务，所述统计模块，具体用于根据所述目标表结构与统计模型，对所述目标统计需求场景的所述统计目标进行即时统计。在一种可行的设计中，所述统计任务指示所述目标统计需求场景的定时统计任务，所述统计模块，具体用于根据所述目标表结构与统计模型，对所述目标统计需求场景的所述统计目标进行定时统计。在一种可行的设计中，所述至少一个统计需求场景包括第一统计需求场景和第二统计需求场景，所述第一统计需求场景对应的表结构和所述第二统计需求场景对应的表结构不同。本申请实施例提供的数据统计方法及装置，将至少一个统计需求场景归类为一类统计场景，至少一个统计需求场景中的每个统计需求场景的统计方式相同，针对统计场景训练统计模型，确定目标统计需求场景的目标表结构，目标表结构用于指示目标统计需求场景的统计目标，目标统计需求场景为至少一个统计需求场景中的任意一个统计需求场景，根据目标表结构与统计模型，对目标统计需求场景的统计目标进行统计。该过程中，通过抽象归类，将统计方式相同的至少一个统计需求场景归类为一类统计场景，仅针对该统计场景训练统计模型，并基于该统计模型进行数据统计以满足用户对海量数据的统计需求。同时，通过抽象归类是抽象出不同统计需求场景的共性，训练统计模型时将公用的处理逻辑封装，对外提供统一的调用，能够很大程度上减少重复开发、提高训练模型的可维护性和通用性。附图说明图1为本申请数据统计方法实施例一的流程图；图2为本申请数据统计方法所适用的处理过程示意图；图3为本申请数据统计方法所适用的数据统计系统的架构示意图；图4为本申请数据统计方法中所适用的表映射示意图；图5为本申请数据统计装置实施例一的结构示意图；图6为本申请数据统计装置实施例二的结构示意图。具体实施方式为使本申请实施例的目的、技术方案和优点更加清楚，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。以下内容为结合附图及较佳实施例，对依据本申请申请的具体实施方式、结构、特征及其功效的详细说明。本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”、“第四”等(如果存在)是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本申请的实施例例如能够以除了在这里图示或描述的那些以外的顺序实施。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。图1为本申请数据统计方法实施例一的流程图，包括：101、将至少一个统计需求场景归类为一类统计场景，所述至少一个统计需求场景中的每个统计需求的统计方式相同。通常来说，很多不同的统计需求场景都可以用完全相同的处理逻辑去处理，例如：统计一个电商平台的即时交易额的统计需求场景和统计一个菜单项的点击次数的统计需求场景，都是累加的统计需求场景，所以属于同一类统计场景。再如，对订单表按照商户维度统计出各个商户的订单总金额的统计需求场景，和对订单表按照地区维度统计出各个地区的订单总金额的统计需求场景，这两个统计需求场景本质上也是同一类统计需求，实际实现时，该两个统计需求场景的订单表存储在服务器，只是统计过程中使用不同的字段而已，其他的处理逻辑都是完全相同的。本步骤中，将至少一个统计需求场景抽象归类为一类统计场景，所述至少一个统计需求场景中的每个统计需求场景的统计方式相同。其中，抽象归类是抽象出不同统计需求场景的共性，将公用的处理逻辑封装，对外提供本文档来自技高网...

【技术保护点】
一种数据统计方法，其特征在于，包括：将至少一个统计需求场景归类为一类统计场景，所述至少一个统计需求场景中的每个统计需求场景的统计方式相同；针对所述统计场景训练统计模型；确定目标统计需求场景的目标表结构，所述目标表结构用于指示所述目标统计需求场景的统计目标，所述目标统计需求场景为所述至少一个统计需求场景中的任意一个统计需求场景；根据所述目标表结构与统计模型，对所述目标统计需求场景的所述统计目标进行统计。

【技术特征摘要】
1.一种数据统计方法，其特征在于，包括：将至少一个统计需求场景归类为一类统计场景，所述至少一个统计需求场景中的每个统计需求场景的统计方式相同；针对所述统计场景训练统计模型；确定目标统计需求场景的目标表结构，所述目标表结构用于指示所述目标统计需求场景的统计目标，所述目标统计需求场景为所述至少一个统计需求场景中的任意一个统计需求场景；根据所述目标表结构与统计模型，对所述目标统计需求场景的所述统计目标进行统计。2.根据权利要求1所述的方法，其特征在于，所述根据所述目标表结构与统计模型，对所述目标统计需求场景的所述统计目标进行统计之前，还包括：对所述目标统计需求场景配置统计任务。3.根据权利要求2所述的方法，其特征在于，所述统计任务指示所述目标统计需求场景的即时统计任务，所述根据所述目标表结构与统计模型，对所述目标统计需求场景的所述统计目标进行统计，包括：根据所述目标表结构与统计模型，对所述目标统计需求场景的所述统计目标进行即时统计。4.根据权利要求2所述的方法，其特征在于，所述统计任务指示所述目标统计需求场景的定时统计任务，所述根据所述目标表结构与统计模型，对所述目标统计需求场景的所述统计目标进行统计，包括：根据所述目标表结构与统计模型，对所述目标统计需求场景的所述统计目标进行定时统计。5.根据权利要求1～4任一项所述的方法，其特征在于，所述至少一个统计需求场景包括第一统计需求场景和第二统计需求场景，所述第一统计需求场景对应的表结构和所述第二统计需...

【专利技术属性】
技术研发人员：丰宗军，
申请(专利权)人：北京五八信息技术有限公司，
类型：发明
国别省市：北京,11