基于海量跨屏收视行为数据的采集汇聚方法技术

本发明专利技术公开了一种基于海量跨屏收视行为数据的采集汇聚方法。该方法主要解决的是面对越来越灵活的双向新媒体业务，通过双向网络及互联网的信息回传优势，将DVB双向终端、IPTV、OTT、智能电视、手机、平板电脑等智能终端用户的多屏收视行为数据进行采集，并融合时间数据、频道数据、节目数据、广告数据等基本信息数据，将多维度用户收视行为数据进行采集与汇聚，并实现向各业务系统进行实时分发，做到数据集中汇聚与共享。通过该方法可利用运营商双向网络及互联网的信息回传优势，以最经济的投入获取海量用户的多屏收视行为数据，并实现多维度用户数据的采集、汇聚、实时分发与共享。

Data collection and aggregation method based on mass cross screen viewing behavior data

The invention discloses a collection and aggregation method based on mass cross screen viewing behavior data. This method is mainly to solve the problem facing more and more flexible way to new media business, through the information network and the Internet advantage of two-way feedback, the multi screen viewing behavior data of DVB IPTV, OTT, two-way terminal, smart TV, mobile phone, tablet computer and other intelligent terminal users and data acquisition, fusion time, channel data, program the data, advertising data and other basic information data, the multi dimension user viewing behavior data collection and aggregation, and realize the real-time distributed to various business systems, data gathering and sharing it. Return the information advantage through this method can be used in two-way network and Internet operators, multi screen viewing behavior data in the most economical investment to get massive user, and realizes the collection, aggregation, distribution and sharing of real-time multi dimension user data.

【技术实现步骤摘要】
基于海量跨屏收视行为数据的采集汇聚方法
：本专利技术涉及传媒领域网络信息处理技术，是一个基于海量跨屏收视行为数据的采集汇聚方法。
技术介绍
：随着广电网络公司后平移时代的到来，数字电视业务发展日益成熟，付费频道、时移回看、VOD点播、其他增值业务(股票、电视商城、游戏等)等多种双向互动新业务在不断的充实广电网络运营商的业务服务内容，广电网络运营商的发展重点逐渐从数字平台搭建、双向网络改造转向了更加多元化的业务经营和盈利模式。同时，随着互联网的普及，基于互联网视频业务的OTT、IPTV、智能电视、手机及平板电脑等智能终端的市场占有率都呈现快速增长趋势。从最终用户的角度来说，用户获取视频内容的渠道已经从单屏(电视机第一大屏)逐步向多屏获取的方向发展。而无论是业务推广，还是广告投放，或是信息宣传都需要了解用户的属性，用户的具体属性决定了业务、广告、信息等投放内容是否能够有效传递至最终用户。如何以最经济的投入，快速有效地、精确地获取最终用户的属性信息，成为了传媒行业丞待解决的问题。随着互联网技术的普及，各大运营商已经逐步开始布局用户收视行为数据的采集，这些数据可以帮助运营商部分了解用户的行为本文档来自技高网...

【技术保护点】
基于海量跨屏收视行为数据的采集汇聚方法，该方法通过设立包括由终端采集模块、认证配置模块、前置采集模块、中心数据汇聚模块、分布式存储和计算模块、实时统计模块这六个模块为主组成的系统，并设置以下运行机制：终端采集模块：监听终端业务应用，把用户操作产生的用户行为数据，回传到前置采集模块；用于对在网的智能终端进行用户行为数据的采集，终端业务应用将用户行为数据通过中间件的消息接口发送给终端采集模块，再由采集模块统一向前端上报全部业务数据和心跳数据；认证配置模块：主要负责对智能终端进行合法性认证，并对终端及前置采集模块进行采集策略的配置，配置信息包括传输方式、传输开关、上传周期这些信息；前置采集模块：前置...

【技术特征摘要】
1.基于海量跨屏收视行为数据的采集汇聚方法，该方法通过设立包括由终端采集模块、认证配置模块、前置采集模块、中心数据汇聚模块、分布式存储和计算模块、实时统计模块这六个模块为主组成的系统，并设置以下运行机制：终端采集模块：监听终端业务应用，把用户操作产生的用户行为数据，回传到前置采集模块；用于对在网的智能终端进行用户行为数据的采集，终端业务应用将用户行为数据通过中间件的消息接口发送给终端采集模块，再由采集模块统一向前端上报全部业务数据和心跳数据；认证配置模块：主要负责对智能终端进行合法性认证，并对终端及前置采集模块进行采集策略的配置，配置信息包括传输方式、传输开关、上传周期这些信息；前置采集模块：前置采集模块主要用于采集智能终端提交的用户行为数据，并将接收到的用户行为数据，实时上报中心数据汇聚模块；即智能终端通过终端采集模块利用回传协议将用户行为数据提交到前置采集模块，前置采集模块通过数据采集服务器获取提交的用户行为数据后，将数据记录到本地的日志文件，防止数据丢失；中心数据汇聚模块：作为采集系统的重要中枢，具有接收前置采集模块传输的用户行为数据及第三方对接系统的内容数据，并负责把接收到的数据汇总，日志记录，同时再分发给分布式存储与计算模块、实时统计模块、第三方业务系统，具有进行接收、分发、高速稳定、可靠的功能结构；分布式存储和计算模块：接收数据并存储，为非实时数据分析所用；分布式存储和计算模块采用hadoop存储集群，负责对中心数据汇聚模块分发过来的用户行为数据进行清洗、过滤、转换这些预处理工作，最终形成有效的用户行为数据集合并进行存储，同时提供经过预处理后的有效...

【专利技术属性】
技术研发人员：李馥岑，糜万军，孙鑫，
申请(专利权)人：上海星红桉数据科技有限公司，
类型：发明
国别省市：上海,31