一种面向业务的数据计算方法及装置制造方法及图纸

本发明专利技术涉及一种面向业务的数据计算方法及装置，其中，数据计算方法包括：收集用户数据和业务数据；对所述用户数据和业务数据进行消重处理；对消重处理后的数据进行实时计算，获得报表数据；同时，对消重处理后的数据进行存储，达到规定数据量后，对存储的数据进行离线计算，获得面向业务的集成数据。

【技术实现步骤摘要】
一种面向业务的数据计算方法及装置
本专利技术涉及云计算
，特别涉及一种面向业务的数据计算方法及装置。
技术介绍
对于游戏厂商来说，用户操作游戏系统的行为以及游戏运行时，在游戏厂商的服务器上产生大量的数据。在用户操作游戏系统时，因网络中断等其他因素导致系统无法正常的运行，游戏运营人员需要及时发现问题。另外，在推广新游戏时，基于游戏厂商的服务器上的数据进行玩家消费行为分析、玩家数量分析等多种类型的数据计算，则需要从游戏厂商服务器处请求适于进行不同数据分析任务的数据，会对游戏厂商服务器来说会造成很大的压力，甚至会有可能会影响游戏厂商服务器上游戏程序的运行。在游戏业务领域，经常需要对大量的业务数据进行分析，由于待分析的数据量通常较大，所以如何使得数据分析的效率得到提高就成为重要的课题。
技术实现思路
本专利技术实施例的主要目的在于提出一种面向业务的数据计算方法及装置，利用计算结果对业务服务器上的数据进行分析，提供工作效率，以克服上述问题。为实现上述目的，本专利技术提供了一种面向业务的数据计算方法，包括：收集用户数据和业务数据；对用户数据和业务数据进行消重处理；对消重处理后的数据进行实时计算本文档来自技高网...

【技术保护点】
一种面向业务的数据计算方法，其特征在于，包括：收集用户数据和业务数据；对所述用户数据和业务数据进行消重处理；对消重处理后的数据进行实时计算，获得报表数据；同时，对消重处理后的数据进行存储，达到规定数据量后，对存储的数据进行离线计算，获得面向业务的集成数据。

【技术特征摘要】
1.一种面向业务的数据计算方法，其特征在于，包括：收集用户数据和业务数据；对所述用户数据和业务数据进行消重处理；对消重处理后的数据进行实时计算，获得报表数据；同时，对消重处理后的数据进行存储，达到规定数据量后，对存储的数据进行离线计算，获得面向业务的集成数据。2.如权利要求1所述的方法，其特征在于，所述用户数据通过异步传输方式传输至分布式面向列的存储系统。3.如权利要求1所述的方法，其特征在于，所述业务数据按照系统日志协议传输至分布式面向列的存储系统。4.如权利要求1所述的方法，其特征在于，对所述用户数据和业务数据采用布隆过滤器进行消重处理。5.如权利要求1所述的方法，其特征在于，所述实时计算的步骤具体为：对消重处理后的数据按照storm框架进行实时计算，获得报表数据，所述报表数据存储至分布式文档存储数据库。6.如权利要求1所述的方法，其特征在于，所述离线计算的步骤具体为：通过日志收集器将消重处...

【专利技术属性】
技术研发人员：吕本伟，罗盼，
申请(专利权)人：北京奇虎科技有限公司，奇智软件北京有限公司，
类型：发明
国别省市：北京,11