The invention provides a data processing method, device and server, which comprises the following steps: receiving user requests sent by clients; recording the user requests in the form of logs and reading the logs after the completion of the logs; sending and receiving network with strong consistency under the asynchronous remote call service framework of abstract network layer; and receiving strong consistency by calling state machine engine. Callback to enable the state machine engine to execute the user request.
【技术实现步骤摘要】
一种数据传输方法、装置、与服务器
本专利技术涉及数据库
,特别涉及一种数据处理方法、装置与服务器。
技术介绍
Redis的主从复制采用异步复制方法,从服务器周期性向主服务器报告复制流的处理进度。Redis是一个key-value存储系统。和Memcached类似,它支持存储的value类型相对更多,包括string(字符串)、list(链表)、set(集合)、zset(sortedset--有序集合)和hash(哈希类型)。这些数据类型都支持push/pop、add/remove及取交集并集和差集及更丰富的操作,而且这些操作都是原子性的。在此基础上,Redis支持各种不同方式的排序。与memcached一样,为了保证效率,数据都是缓存在内存中。区别的是人Redis会周期性的把更新的数据写入磁盘或者把修改操作写入追加的记录文件,并且在此基础上实现了Master-slave(主从)同步。Redis支持主从同步。数据可以从主服务器向任意数量的从服务器上同步,从服务器可以是关联其他从服务器的主服务器。这使得Redis可执行单层树复制。存盘可以有意无意的对数据进行写操作。由于完全实现了发布/订阅机制,使得从数据库在任何地方同步树时,可订阅一个频道并接收主服务器完整的消息发布记录。同步对读取操作的可扩展性和数据冗余很有帮助。然而,Redis没有提供强一致同步模式,无法覆盖银行、保险等金融级应用场景中。
技术实现思路
为了解决现有技术中存在的技术问题,本专利技术实施例提供了一种数据处理方法、装置、服务器与存储介质。所述技术方案如下:一方面,提供一种数据处理方法,包括: ...
【技术保护点】
1.一种数据处理方法,其特征在于,所述方法包括如下步骤:接收客户端发送的用户请求;以日志形式记录所述用户请求,并在记录完成之后读取该日志;在抽象网络层的异步远程调用服务框架(RPC)下进行强一致性的网络收发;调用状态机引擎(FSM)接收强一致性回调,以使得所述状态机引擎执行所述用户请求。
【技术特征摘要】
1.一种数据处理方法,其特征在于,所述方法包括如下步骤:接收客户端发送的用户请求;以日志形式记录所述用户请求,并在记录完成之后读取该日志;在抽象网络层的异步远程调用服务框架(RPC)下进行强一致性的网络收发;调用状态机引擎(FSM)接收强一致性回调,以使得所述状态机引擎执行所述用户请求。2.根据权利要求1所述的方法,其特征在于,所述接收客户端发送的用户请求包括:由主节点接收来自客户端的用户请求,当从节点接收到来自客户端的请求时,拒绝所述请求,并向客户端返回所述主节点的网络地址。3.根据权利要求1所述的方法,其特征在于,以日志形式记录所述用户请求,并在记录完成之后读取该日志包括:接收用户请求;将所述用户请求序列化为请求日志;向磁盘读写逻辑发送日志落盘请求;接收磁盘读写逻辑返回的信息,当落盘完成时,读出该落盘日志。4.根据权利要求1所述的方法,其特征在于,在抽象网络层的异步远程调用服务框架(RPC)下进行强一致性的网络收发包括:主节点将读出的日志同步给从节点;所述从节点对所述日志进行落盘操作,并在成功落盘时,通知所述主节点。5.根据权利要求4所述的方法,其特征在于,所述主节点将读出的日志同步给从节点步骤包括:主节点向从节点发送心跳包;当没有需要同步的日志时,心跳包的内容为空;当需要同步日志时,则带上需要同步的日志;主节点判断从节点的...
【专利技术属性】
技术研发人员:燕皓阳,赵森,苏仙科,曹宝山,
申请(专利权)人:腾讯科技深圳有限公司,
类型:发明
国别省市:广东,44
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。