实时消息处理方法、系统、装置、存储介质及电子设备制造方法及图纸

技术编号:26170827 阅读:27 留言:0更新日期:2020-10-31 13:40
本发明专利技术实施例提供了一种实时消息处理方法、系统、装置、计算机可读存储介质及电子设备,涉及计算机技术领域。所述方法包括:获取反映数据库变化情况的数据库变更消息并发送到封装线程;利用所述封装线程根据所述数据库变更消息生成识别数据和内容数据,并根据所述识别数据将所述识别数据和所述内容数据发送到消息队列的相应线程;根据所述识别数据对所述内容数据进行时序校验;根据通过时序校验的所述识别数据和所述内容数据生产索引。本发明专利技术实施例的技术方案通过使用多线程发送反映数据库变化情况的识别数据和内容数据,并对内容数据进行时序校验,在保证消息时序的前提下,实现了面对海量商品实时修改消息时的高吞吐,低延迟处理。

【技术实现步骤摘要】
实时消息处理方法、系统、装置、存储介质及电子设备
本专利技术涉及计算机
,具体而言,涉及一种实时消息处理方法、系统、装置、计算机可读存储介质及电子设备。
技术介绍
在互联网应用中,搜索引擎是大家快速获取信息的主要手段。在电商行业中,会存在商品实时修改的情况。商品实时修改包括对商品的商品名称、库存、价格以及评论等数据进行实时修改。特别在商品促销活动期间,消息量巨大,如果搜索引擎的吞吐量不够,会出现促销价格未及时变更,商品在无库存的情况下依然在搜索展示。如果消息时序不正确,会出现商品的上下架状态不正确,从而影响用户体验和商品的销量。如何在保证消息时序的前提下,实现面对海量商品实时修改消息时的高吞吐,低延迟处理,是目前亟需解决的问题。需要说明的是,在上述
技术介绍
部分公开的信息仅用于加强对本专利技术的背景的理解,因此可以包括不构成对本领域普通技术人员已知的现有技术的信息。
技术实现思路
本专利技术实施例的目的在于提供一种实时消息处理方法、系统、装置、计算机可读存储介质及电子设备,进而至少在一定程度上实现本文档来自技高网...

【技术保护点】
1.一种实时消息处理方法,其特征在于,包括:/n获取反映数据库变化情况的数据库变更消息并发送到封装线程;/n利用所述封装线程根据所述数据库变更消息生成识别数据和内容数据,并根据所述识别数据将所述识别数据和所述内容数据发送到消息队列的相应线程;/n根据所述识别数据对所述内容数据进行时序校验;/n根据通过时序校验的所述识别数据和所述内容数据生产索引。/n

【技术特征摘要】
1.一种实时消息处理方法,其特征在于,包括:
获取反映数据库变化情况的数据库变更消息并发送到封装线程;
利用所述封装线程根据所述数据库变更消息生成识别数据和内容数据,并根据所述识别数据将所述识别数据和所述内容数据发送到消息队列的相应线程;
根据所述识别数据对所述内容数据进行时序校验;
根据通过时序校验的所述识别数据和所述内容数据生产索引。


2.根据权利要求1所述的方法,其特征在于,根据所述识别数据对所述内容数据进行时序校验前,所述方法还包括:
从所述消息队列获取所述识别数据和所述内容数据;
根据所述识别数据确定目标校验线程;
将所述识别数据和所述内容数据发送至所述目标校验线程。


3.根据权利要求1所述的方法,其特征在于,根据所述识别数据对所述内容数据进行时序校验后,所述方法还包括:
根据所述识别数据将通过时序校验的所述识别数据和所述内容数据发送到所述消息队列的相应线程。


4.根据权利要求1所述的方法,其特征在于,所述根据识别数据将所述识别数据和所述内容数据发送到消息队列的相应线程,包括:
对所述识别数据进行哈希处理,得到哈希值;
将所述哈希值相对于所述消息队列的总线程数取余数;
根据所述余数确定所述识别数据对应的消息队列的线程。


5.根据权利要求1所述的方法,其特征在于,所述根据所述识别数据对所述内容数据进行时序校验,包括:
根据所述内容数据生成信息校验值;
将所述信息校验值与缓存校验值进行比较;
若所述信息校验值大于所述缓存校验值,确定校验通过并将所述缓存校验值更新为所述信息校验值。


6.根据权利要求5所述的方法,其特征在于,所述信息校验值包括第一部分和第二部分,所述缓存校验值包括第三部分和第四部分;
所述根据所述内容数据生成信息校验值包括:
根据所述内容数据的文件名生成所述第一部分,根据所述内容数据的文件偏移量生成所述第二部分;...

【专利技术属性】
技术研发人员:韦永剑周涛唐书辉
申请(专利权)人:北京京东尚科信息技术有限公司北京京东世纪贸易有限公司
类型:发明
国别省市:北京;11

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1