发布和订阅数据的系统、方法和装置制造方法及图纸

本申请实施例公开了发布和订阅数据的系统、方法和装置。该系统的一具体实施方式包括：发布服务器将待发布数据存储到本地，以及将待发布数据的数据标识和存储位置信息发送给控制服务器。控制服务器根据发布服务器标识、所接收到的数据标识和存储位置信息更新对应关系表。订阅服务器向控制服务器发送订阅请求。控制服务器根据对应关系表确定与订阅请求对应的数据所在位置的位置信息，将所确定的位置信息发送给订阅服务器。订阅服务器向位置信息中的发布服务器标识所指示的发布服务器发送数据获取请求。发布服务器获取数据获取请求中的存储位置信息所指示的数据，并将所获取的数据发送给订阅服务器。该实施方式减少了发布和订阅数据的系统中的资源占用量。

【技术实现步骤摘要】
发布和订阅数据的系统、方法和装置
本申请实施例涉及计算机
，具体涉及互联网
，尤其涉及发布和订阅系统、方法和装置。
技术介绍
由于发布和订阅数据的系统中对于数据实时传输的需要，目前大都采用占用大量硬盘和内存资源的实时传输方式来实现发布和订阅数据的系统的数据传输。
技术实现思路
本申请实施例提出了发布和订阅数据的系统、方法和装置。第一方面，本申请实施例提供了一种发布和订阅数据的系统，该系统包括：发布服务器、订阅服务器和控制服务器，其中：发布服务器用于：将待发布数据存储到发布服务器本地；将待发布数据的数据标识和存储位置信息发送到控制服务器；以及响应于接收到订阅服务器发送的数据获取请求，获取数据获取请求中的存储位置信息所指示的数据，并将所获取的数据发送给订阅服务器；控制服务器用于：响应于接收到发布服务器发送的数据标识和存储位置信息，根据发布服务器的发布服务器标识、所接收到的数据标识和存储位置信息更新数据位置对应关系表，其中，数据位置对应关系表用于表征发布服务器标识、数据标识和存储位置信息之间的对应关系；响应于接收到订阅服务器发送的订阅请求，根据数据位置对应关系表确定与订阅请求对应的数据所在位置的位置信息，以及将所确定的位置信息发送给订阅服务器，其中，位置信息包括与订阅请求所对应的数据所在发布服务器的发布服务器标识和存储位置信息；订阅服务器用于：向控制服务器发送订阅请求；以及响应于接收到控制服务器发送的位置信息，向位置信息中的发布服务器标识所指示的发布服务器发送数据获取请求，其中，数据获取请求包括位置信息中的存储位置信息。在一些实施例中，发布服务器用于将待发布数据存储到发布服务器本地，包括：发布服务器用于：确定待发布数据是发布服务器内存中的数据还是磁盘中的数据；响应于确定待发布数据是发布服务器内存中的数据，将待发布数据存储到发布服务器的本地磁盘中；响应于确定待发布数据是发布服务器磁盘中的数据，将待发布数据从发布服务器的磁盘中加载到发布服务器的内存中。在一些实施例中，发布服务器用于响应于确定待发布数据是发布服务器内存中的数据，将待发布数据存储到发布服务器的本地磁盘中，包括：将待发布数据划分成至少一条记录；将至少一条记录存储到发布服务器的本地磁盘中的至少一个文件中；用至少一条记录中每条记录的记录标识、所在文件的文件存储路径和该条记录在所在文件中的具体位置，生成索引文件；将所生成的索引文件存储到发布服务器的本地磁盘中。在一些实施例中，发布服务器还用于：在将待发布数据的数据标识和存储位置信息发送到控制服务器之前，将待发布数据在发布服务器的本地磁盘中的存储路径信息确定为待发布数据的存储位置信息。在一些实施例中，位置信息还包括：与订阅请求对应的数据的数据标识。在一些实施例中，数据获取请求还包括位置信息中的数据标识；以及发布服务器用于响应于接收到订阅服务器发送的数据获取请求，获取数据获取请求中的存储位置信息所指示的数据，并将所获取的数据发送给订阅服务器，包括：发布服务器用于：响应于接收到订阅服务器发送的数据获取请求，在发布服务器本地内存中查找与所接收到的数据获取请求中的数据标识匹配的数据；响应于查找到匹配的数据，将所找到的数据发送给订阅服务器；响应于未找到匹配的数据，获取发布服务器本地磁盘中所接收到的数据获取请求中的存储位置信息所指示的数据，并将所获取的数据发送给订阅服务器。第二方面，本申请实施例提供了一种应用于发布和订阅数据的系统中的发布服务器的数据发布方法，该方法包括：将待发布数据存储到发布服务器本地；将待发布数据的数据标识和存储位置信息发送到控制服务器；响应于接收到订阅服务器发送的数据获取请求，获取数据获取请求中的存储位置信息所指示的数据，并将所获取的数据发送给订阅服务器。在一些实施例中，将待发布数据存储到发布服务器本地，包括：确定待发布数据是发布服务器内存中的数据还是磁盘中的数据；响应于确定待发布数据是发布服务器内存中的数据，将待发布数据存储到发布服务器的本地磁盘中；响应于确定待发布数据是发布服务器磁盘中的数据，将待发布数据从发布服务器的磁盘中加载到发布服务器的内存中。在一些实施例中，将待发布数据存储到发布服务器的本地磁盘中，包括：将待发布数据划分成至少一条记录；将至少一条记录存储到发布服务器的本地磁盘中的至少一个文件中；用至少一条记录中每条记录的记录标识、所在文件的文件存储路径和该条记录在所在文件中的具体位置，生成索引文件；将所生成的索引文件存储到发布服务器的本地磁盘中。在一些实施例中，在将待发布数据的数据标识和存储位置信息发送到控制服务器之前，方法还包括：将待发布数据在发布服务器的本地磁盘中的存储路径信息确定为待发布数据的存储位置信息。在一些实施例中，数据获取请求还包括数据标识；以及获取数据获取请求中的存储位置信息所指示的数据，并将所获取的数据发送给订阅服务器，包括：在发布服务器本地内存中查找与所接收到的数据获取请求中的数据标识匹配的数据；响应于查找到匹配的数据，将所找到的数据发送给订阅服务器；响应于未找到匹配的数据，获取发布服务器本地磁盘中所接收到的数据获取请求中的存储位置信息所指示的数据，并将所获取的数据发送给订阅服务器。第三方面，本申请实施例提供了一种应用于发布和订阅数据的系统中的控制服务器的数据控制方法，该方法包括：响应于接收到发布服务器发送的数据标识和存储位置信息，根据发布服务器的发布服务器标识、所接收到的数据标识和存储位置信息更新数据位置对应关系表，其中，数据位置对应关系表用于表征发布服务器标识、数据标识和存储位置信息之间的对应关系；响应于接收到订阅服务器发送的订阅请求，根据数据位置对应关系表确定与订阅请求对应的数据所在位置的位置信息，以及将所确定的位置信息发送给订阅服务器，其中，位置信息包括与订阅请求所对应的数据所在发布服务器的发布服务器标识和存储位置信息。第四方面，本申请实施例提供了一种应用于发布和订阅数据的系统中的订阅服务器的数据订阅方法，该方法包括：向控制服务器发送订阅请求；响应于接收到控制服务器发送的位置信息，向位置信息中的发布服务器标识所指示的发布服务器发送数据获取请求，其中，数据获取请求包括位置信息中的存储位置信息。第五方面，本申请实施例提供了一种应用于发布和订阅数据的系统中的发布服务器的数据发布装置，该装置包括：存储单元，配置用于将待发布数据存储到发布服务器本地；第一发送单元，配置用于将待发布数据的数据标识和存储位置信息发送到控制服务器；获取及发送单元，配置用于响应于接收到订阅服务器发送的数据获取请求，获取数据获取请求中的存储位置信息所指示的数据，并将所获取的数据发送给订阅服务器。在一些实施例中，存储单元包括：确定模块，配置用于确定待发布数据是发布服务器内存中的数据还是磁盘中的数据；存储模块，配置用于响应于确定待发布数据是发布服务器内存中的数据，将待发布数据存储到发布服务器的本地磁盘中；加载模块，配置用于响应于确定待发布数据是发布服务器磁盘中的数据，将待发布数据从发布服务器的磁盘中加载到发布服务器的内存中。在一些实施例中，存储模块进一步用于：将待发布数据划分成至少一条记录；将至少一条记录存储到发布服务器的本地磁盘中的至少一个文件中；用至少一条记录中每条记录的记录本文档来自技高网...

【技术保护点】
1.一种发布和订阅数据的系统，包括：发布服务器、订阅服务器和控制服务器，其中：所述发布服务器用于：将待发布数据存储到所述发布服务器本地；将所述待发布数据的数据标识和存储位置信息发送到所述控制服务器；以及响应于接收到所述订阅服务器发送的数据获取请求，获取所述数据获取请求中的存储位置信息所指示的数据，并将所获取的数据发送给所述订阅服务器；所述控制服务器用于：响应于接收到所述发布服务器发送的数据标识和存储位置信息，根据所述发布服务器的发布服务器标识、所接收到的数据标识和存储位置信息更新数据位置对应关系表，其中，所述数据位置对应关系表用于表征发布服务器标识、数据标识和存储位置信息之间的对应关系；响应于接收到所述订阅服务器发送的订阅请求，根据所述数据位置对应关系表确定与所述订阅请求对应的数据所在位置的位置信息，以及将所确定的位置信息发送给所述订阅服务器，其中，所述位置信息包括与所述订阅请求所对应的数据所在发布服务器的发布服务器标识和存储位置信息；所述订阅服务器用于：向所述控制服务器发送订阅请求；以及响应于接收到所述控制服务器发送的位置信息，向所述位置信息中的发布服务器标识所指示的发布服务器发送数据获取请求，其中，所述数据获取请求包括所述位置信息中的存储位置信息。...

【技术特征摘要】
1.一种发布和订阅数据的系统，包括：发布服务器、订阅服务器和控制服务器，其中：所述发布服务器用于：将待发布数据存储到所述发布服务器本地；将所述待发布数据的数据标识和存储位置信息发送到所述控制服务器；以及响应于接收到所述订阅服务器发送的数据获取请求，获取所述数据获取请求中的存储位置信息所指示的数据，并将所获取的数据发送给所述订阅服务器；所述控制服务器用于：响应于接收到所述发布服务器发送的数据标识和存储位置信息，根据所述发布服务器的发布服务器标识、所接收到的数据标识和存储位置信息更新数据位置对应关系表，其中，所述数据位置对应关系表用于表征发布服务器标识、数据标识和存储位置信息之间的对应关系；响应于接收到所述订阅服务器发送的订阅请求，根据所述数据位置对应关系表确定与所述订阅请求对应的数据所在位置的位置信息，以及将所确定的位置信息发送给所述订阅服务器，其中，所述位置信息包括与所述订阅请求所对应的数据所在发布服务器的发布服务器标识和存储位置信息；所述订阅服务器用于：向所述控制服务器发送订阅请求；以及响应于接收到所述控制服务器发送的位置信息，向所述位置信息中的发布服务器标识所指示的发布服务器发送数据获取请求，其中，所述数据获取请求包括所述位置信息中的存储位置信息。2.根据权利要求1所述的系统，其中，所述发布服务器用于将待发布数据存储到所述发布服务器本地，包括：所述发布服务器用于：确定所述待发布数据是所述发布服务器内存中的数据还是磁盘中的数据；响应于确定所述待发布数据是所述发布服务器内存中的数据，将所述待发布数据存储到所述发布服务器的本地磁盘中；响应于确定所述待发布数据是所述发布服务器磁盘中的数据，将所述待发布数据从所述发布服务器的磁盘中加载到所述发布服务器的内存中。3.根据权利要求2所述的系统，其中，所述发布服务器用于响应于确定所述待发布数据是所述发布服务器内存中的数据，将所述待发布数据存储到所述发布服务器的本地磁盘中，包括：将所述待发布数据划分成至少一条记录；将所述至少一条记录存储到所述发布服务器的本地磁盘中的至少一个文件中；用所述至少一条记录中每条记录的记录标识、所在文件的文件存储路径和该条记录在所在文件中的具体位置，生成索引文件；将所生成的索引文件存储到所述发布服务器的本地磁盘中。4.根据权利要求3所述的系统，其中，所述发布服务器还用于：在将所述待发布数据的数据标识和存储位置信息发送到所述控制服务器之前，将所述待发布数据在所述发布服务器的本地磁盘中的存储路径信息确定为所述待发布数据的存储位置信息。5.根据权利要求4所述的系统，其中，所述位置信息还包括：与所述订阅请求对应的数据的数据标识。6.根据权利要求5所述的系统，其中，所述数据获取请求还包括所述位置信息中的数据标识；以及所述发布服务器用于响应于接收到所述订阅服务器发送的数据获取请求，获取所述数据获取请求中的存储位置信息所指示的数据，并将所获取的数据发送给所述订阅服务器，包括：所述发布服务器用于：响应于接收到所述订阅服务器发送的数据获取请求，在所述发布服务器本地内存中查找与所接收到的数据获取请求中的数据标识匹配的数据；响应于查找到匹配的数据，将所找到的数据发送给所述订阅服务器；响应于未找到匹配的数据，获取所述发布服务器本地磁盘中所接收到的数据获取请求中的存储位置信息所指示的数据，并将所获取的数据发送给所述订阅服务器。7.一种应用于发布和订阅数据的系统中的发布服务器的数据发布方法，包括：将待发布数据存储到所述发布服务器本地；将所述待发布数据的数据标识和存储位置信息发送到控制服务器；响应于接收到订阅服务器发送的数据获取请求，获取所述数据获取请求中的存储位置信息所指示的数据，并将所获取的数据发送给所述订阅服务器。8.根据权利要求7所述的数据发布方法，其中，所述将待发布数据存储到所述发布服务器本地，包括：确定所述待发布数据是所述发布服务器内存中的数据还是磁盘中的数据；响应于确定所述待发布数据是所述发布服务器内存中的数据，将所述待发布数据存储到所述发布服务器的本地磁盘中；响应于确定所述待发布数据是所述发布服务器磁盘中的数据，将所述待发布数据从所述发布服务器的磁盘中加载到所述发布服务器的内存中。9.根据权利要求8所述的数据发布方法，其中，所述将所述待发布数据存储到所述发布服务器的本地磁盘中，包括：将所述待发布数据划分成至少一条记录；将所述至少一条记录存储到所述发布服务器的本地磁盘中的至少一个文件中；用所述至少一条记录中每条记录的记录标识、所在文件的文件存储路径和...

【专利技术属性】
技术研发人员：彭翔宇，
申请(专利权)人：百度在线网络技术北京有限公司，
类型：发明
国别省市：北京,11