高并发数据状态下异构系统的消息同步方法技术方案

本发明专利技术公开了一种高并发数据状态下异构系统的消息同步方法，本方法建立消息发送者与消息接收者之间的元数据信息，并且通过网络请求定时轮询获取元数据信息，保存为各自系统的本地文件；消息接收者根据元数据信息建立消息接收端口、服务和/或交换文件目录；当消息发送者发起消息同步时，消息发送者对本地文件中的元数据信息进行查询匹配，根据指定元数据信息将消息进行封包、加密，根据通讯协议进行消息发送及投递；消息接收者接收消息后，根据所匹配的元数据信息以及重要性排列优先级进行消息处理并保存消息。本方法实现异构系统间的消息同步，各系统间快速、稳定、正确完成消息同步，从而提高消息处理效率，提升系统稳定性和正确性。

【技术实现步骤摘要】
高并发数据状态下异构系统的消息同步方法
本专利技术涉及互联网信息
，尤其涉及一种高并发数据状态下异构系统的消息同步方法。
技术介绍
异构系统一般是指技术体系架构不相同的系统，比如采用不同语言开发，运行在不同系统平台上的系统程序，即由多个不同架构系统组成的异构系统。正因为体系、架构不同，所以消息数据等的组织方式也存在不同，不容易进行信息同步、共享，而在互联网环境下，存在着大量需要同步的消息，尤其在C端互联网平台，更需要频繁地在不同系统之间传递大量消息。在这种情况下，传统消息服务总线技术就应运而生，其借鉴了计算机内部硬件组成的设计思想，将总线设计为中枢系统，提供统一的服务入口，并实现了服务统一管理、服务路由、协议转换、数据格式转换等功能。这样能够将不同系统有效地连接起来。但消息服务总线机制定位为中枢系统，当异构系统多，消息发送量大，高并发的情况下，根据其中心化的设计，极其容易成为资源瓶颈，无法满足消息同步的及时、高效。尤其是在并发高峰的情况下，如果服务总线宕机，将导致整个消息传递无法进行。
技术实现思路
本专利技术所要解决的技术问题是提供一种高并发数据状态下异构系统的消息同步方法，本方法克服传统异构系统总线机制消息同步的缺陷，实现异构系统间的消息同步，且在海量用户访问请求的业务高峰情况下，各系统间快速、稳定、正确完成消息同步，从而提高消息处理效率，提升系统稳定性和正确性。为解决上述技术问题，本专利技术高并发数据状态下异构系统的消息同步方法包括如下步骤：步骤一、建立消息发送者与消息接收者之间的元数据信息，元数据信息包括系统信息、重要性等级、通讯信息、通讯协议、加密机制、数据容量、负载策略和降级策略；步骤二、消息发送者和消息接收者通过网络请求定时轮询获取元数据信息，保存为各自系统的本地文件，若元数据信息有变更则将变更数据更新到本地文件；步骤三、消息接收者根据本地文件中的元数据信息建立消息接收端口、服务和/或交换文件目录；步骤四、当消息发送者发起消息同步时，消息发送者在本地文件中的元数据信息进行查询匹配，根据消息接收者的系统、通讯、协议信息情况，将消息进行封包、加密，根据通讯协议进行消息发送及投递；步骤五、消息接收者接收消息后，根据所匹配的元数据信息以及重要性排列优先级进行消息处理，所述消息处理包括解包、解密、数据CRC校验，并保存消息。进一步，若异构系统发生变化，所述元数据信息同步更新，并定时同步到各个消息发送者和消息接收者。进一步，所述消息接收者根据系统消息发送者的数量、接收消息的数量，采用累加计数器或单位时间计数器计算消息容量和并发量，所述消息发送者和消息接收者的数量维护在元数据中。进一步，当消息容量和并发量增大时，自动提升运行中的消息接收者的线程数和文件中的最大线程数，消息接收者的线程数和文件中的最大线程数由消息接收者维护，并根据消息容量和并发量动态调整，当消息接收者的消息容量和并发量升高时，会动态增加线程数，提升接收能力；如果达到最大消息容量时，对新接收的消息进行降级策略处理，降级策略包括更新元数据信息、放大消息发送的响应时间、对消息进行临时存储后再补充处理。进一步，消息发送者根据元数据信息中消息接收者的系统负载情况以及消息发送响应时间是否超过阈值判断消息接收者是否已经达到最大负载，如果满足条件，则执行熔断策略，不再进行消息同步，转为临时消息存储。进一步，消息接收者的消息处理能力恢复后，更新元数据信息，并由消息发送者获取后，恢复消息同步。由于本专利技术高并发数据状态下异构系统的消息同步方法采用了上述技术方案，即本方法建立消息发送者与消息接收者之间的元数据信息，并且通过网络请求定时轮询获取元数据信息，保存为各自系统的本地文件；消息接收者根据元数据信息建立消息接收端口、服务和/或交换文件目录；当消息发送者发起消息同步时，消息发送者在元数据信息中进行查询匹配，将消息进行封包、加密，根据通讯协议进行消息发送及投递；消息接收者接收消息后，根据所匹配的元数据信息以及重要性排列优先级进行消息处理并保存消息。本方法克服传统异构系统总线机制消息同步的缺陷，实现异构系统间的消息同步，且在海量用户访问请求的业务高峰情况下，各系统间快速、稳定、正确完成消息同步，从而提高消息处理效率，提升系统稳定性和正确性。附图说明下面结合附图和实施方式对本专利技术作进一步的详细说明：图1为本专利技术高并发数据状态下异构系统的消息同步方法原理框图；图2为本方法中消息发送者与消息接收者之间的元数据同步示意图。具体实施方式实施例如图1和图2所示，本专利技术高并发数据状态下异构系统的消息同步方法包括如下步骤：步骤一、建立消息发送者与消息接收者之间的元数据信息，元数据信息包括系统信息、重要性等级、通讯信息、通讯协议、加密机制、数据容量、负载策略和降级策略；其中，消息发送者是异构系统中进行消息同步时的消息发送方，消息接收者是消息的接收方；步骤二、消息发送者和消息接收者通过网络请求定时轮询获取元数据信息，保存为各自系统的本地文件，若元数据信息有变更则将变更数据更新到本地文件；步骤三、消息接收者根据元数据信息建立消息接收端口、服务和/或交换文件目录,其中，元数据信息包含系统信息、通信信息、通讯协议以及加密机制，交换文件目录即本地文件目录，会将接收到的消息保存到本地文件，之后由其他线程负责处理；交换文件目录为消息保存的文件目录，当消息接收者在收到消息后，除了直接进行处理外，还可以保存到本地文件，实现消息的交换；步骤四、当消息发送者发起消息同步时，消息发送者通过查找本地文件中的元数据信息，在元数据信息中根据消息接收者的信息进行查询匹配，根据消息接收者的系统、通讯、协议信息情况，将消息进行封包、加密，根据通讯协议进行消息发送及投递；其中，消息接收者信息的查询匹配元由消息发送者将文件数据加载到内存，在内存中解析出消息接收者的系统信息，通讯信息和协议信息；步骤五、消息接收者接收消息后，根据所匹配的元数据信息以及重要性排列优先级进行消息处理，所述消息处理包括解包、解密、数据CRC校验，并保存消息；其中，解包是从二进制流中解析出报文体，并反序列化为可被程序处理的格式；解密是出于保护数据安全的目的，对消息进行加密和解密，使用的加/解密方式包含DES/3DES/AES/RSA等加/解密算法；数据CRC校验是通过CRC32对数据的正确性和完整性进行校验。优选的，若异构系统发生变化，所述元数据信息同步更新，并定时同步到各个消息发送者和消息接收者。优选的，所述消息接收者根据系统消息发送者的数量、接收消息的数量，采用累加计数器或单位时间计数器计算消息容量和并发量。在异构系统中，消息接收者可对应多个消息发送者，所述消息发送者和消息接收者的数量维护在元数据中。优选的，当消息容量和并发量增大时，自动提升运行中的消息接收者的线程数和文件中的最大线程数，消息接收者的线程数和文件中的最大线程数由消息接收者维本文档来自技高网...

【技术保护点】
1.一种高并发数据状态下异构系统的消息同步方法，其特征在于本方法包括如下步骤：/n步骤一、建立消息发送者与消息接收者之间的元数据信息，元数据信息包括系统信息、重要性等级、通讯信息、通讯协议、加密机制、数据容量、负载策略和降级策略；/n步骤二、消息发送者和消息接收者通过网络请求定时轮询获取元数据信息，保存为各自系统的本地文件，若元数据信息有变更则将变更数据更新到本地文件；/n步骤三、消息接收者根据本地文件中的元数据信息建立消息接收端口、服务和/或交换文件目录；/n步骤四、当消息发送者发起消息同步时，消息发送者对本地文件中的元数据信息进行查询匹配，根据消息接收者的系统、通讯、协议信息情况，将消息进行封包、加密，根据通讯协议进行消息发送及投递；/n步骤五、消息接收者接收消息后，根据所匹配的元数据信息以及重要性排列优先级进行消息处理，所述消息处理包括解包、解密、数据CRC校验，并保存消息。/n

【技术特征摘要】
1.一种高并发数据状态下异构系统的消息同步方法，其特征在于本方法包括如下步骤：
步骤一、建立消息发送者与消息接收者之间的元数据信息，元数据信息包括系统信息、重要性等级、通讯信息、通讯协议、加密机制、数据容量、负载策略和降级策略；
步骤二、消息发送者和消息接收者通过网络请求定时轮询获取元数据信息，保存为各自系统的本地文件，若元数据信息有变更则将变更数据更新到本地文件；
步骤三、消息接收者根据本地文件中的元数据信息建立消息接收端口、服务和/或交换文件目录；
步骤四、当消息发送者发起消息同步时，消息发送者对本地文件中的元数据信息进行查询匹配，根据消息接收者的系统、通讯、协议信息情况，将消息进行封包、加密，根据通讯协议进行消息发送及投递；
步骤五、消息接收者接收消息后，根据所匹配的元数据信息以及重要性排列优先级进行消息处理，所述消息处理包括解包、解密、数据CRC校验，并保存消息。


2.根据权利要求1所述的高并发数据状态下异构系统的消息同步方法，其特征在于：若异构系统发生变化，所述元数据信息同步更新，并定时同步到各个消息发送者和消息接收者。


3.根据权利要求1或2所述的高并发数据状态下异构系统的消息同步方法，其特征在于：所...

【专利技术属性】
技术研发人员：赵亚宾，
申请(专利权)人：上海洋漪信息技术有限公司，上海洋码头网络技术有限公司，
类型：发明
国别省市：上海;31