The invention discloses a data synchronous updating method and a system device. The method includes: receiving the required data source according to the demand; acquiring the data needed in the data source and landing it in the database; traversing all the groups that have landed at a preset interval, comparing the group information of the local database with that of the remote interface, if there is no consistency, then comparing the group information of the local database with that of the remote interface. Update; store and push the data that has landed in the database. By processing the historical data in the data source in full, receiving the real-time data and updating and rectifying the interval period, the invention effectively solves the problem of the difference of the real-time data, and achieves the effect of keeping the displayed recommended group data consistent with the original group data. The invention can be widely applied in the field of data processing.
【技术实现步骤摘要】
一种数据同步更新方法、系统及装置
本专利技术涉及数据处理
,尤其涉及一种数据同步更新方法、系统及装置。
技术介绍
在互联网高速发展的今天,大数据的实时交互已是不可忽略的技术支撑。然而现在大数据在实际交互时一般会存在实时数据交互的差异问题。
技术实现思路
为了解决上述技术问题,本专利技术的目的是提供一种能解决数据差异性的数据同步更新方法、系统及装置。本专利技术所采取的技术方案是:一种数据同步更新方法,其特征在于,包括以下步骤:根据需求接收所需的数据源;获取数据源中所需的数据,并将其落地到数据库中;每间隔预设的间隔时间,遍历已落地的所有群组,将本地数据库的群组信息与远程接口的群组信息进行比较,若不一致则进行更新;对已落地到数据库的数据进行存储并推送。作为所述的一种数据同步更新方法的进一步改进,所述的对已落地到数据库的数据进行存储并推送,这一步骤具体为:对已落地到数据库的数据根据成员的数量以有序集合的方式进行存储,并对用户进行推送。作为所述的一种数据同步更新方法的进一步改进,所述的获取数据源中所需的数据,并将其落地到数据库中,这一步骤具体包括:获取数据源中所需的群组数 ...
【技术保护点】
1.一种数据同步更新方法,其特征在于,包括以下步骤:根据需求接收所需的数据源;获取数据源中所需的数据,并将其落地到数据库中;每间隔预设的间隔时间,遍历已落地的所有群组,将本地数据库的群组信息与远程接口的群组信息进行比较,若不一致则进行更新;对已落地到数据库的数据进行存储并推送。
【技术特征摘要】
1.一种数据同步更新方法,其特征在于,包括以下步骤:根据需求接收所需的数据源;获取数据源中所需的数据,并将其落地到数据库中;每间隔预设的间隔时间,遍历已落地的所有群组,将本地数据库的群组信息与远程接口的群组信息进行比较,若不一致则进行更新;对已落地到数据库的数据进行存储并推送。2.根据权利要求1所述的一种数据同步更新方法,其特征在于:所述的对已落地到数据库的数据进行存储并推送,这一步骤具体为:对已落地到数据库的数据根据成员的数量以有序集合的方式进行存储,并对用户进行推送。3.根据权利要求1所述的一种数据同步更新方法,其特征在于:所述的获取数据源中所需的数据,并将其落地到数据库中,这一步骤具体包括:获取数据源中所需的群组数据,并将其落地到数据库中;对数据源中的数据进行消费并处理,进而将其落地到数据库中。4.根据权利要求1所述的一种数据同步更新方法,其特征在于:所述的对数据源中的数据进行消费并处理,进而将其落地到数据库中,这一步骤具体为:通过提供数据源的kafka对数据源的数据进行实时消费并处理,进而将其落地到数据库中。5.根据权利要求1所述的一种数据同步更新方法,其特征在于:所述的数据源包括群组数据,所述群组数据包括群组创建、群组解散、群组转让、成员加入、成员退出和成...
【专利技术属性】
技术研发人员:王蕊,
申请(专利权)人:无锡天脉聚源传媒科技有限公司,
类型:发明
国别省市:江苏,32
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。