政务系统数据清理方法和政务融合系统技术方案

本发明专利技术提供了一种政务数据清理方法和政务融合系统，该方法包括：针对任一政务服务器，计算每个文本的摘要，将文本的摘要发送至云服务器；云服务器接收每个政务服务器发送的文本的摘要，针对任一文本，存储文本的摘要和文本对应的政务服务器的标识信息；政务服务器接收用户的上传文本或下载文本的请求，请求中包含目标文本的摘要；政务服务器向云服务器发送确认请求消息，确认请求消息中包含目标文本的摘要；云服务器通过目标文本的摘要对确认请求进行响应；政务服务器根据云服务器的响应，处理用户的上传文本或下载文本的请求。本发明专利技术能够提高政务融合系统的数据质量。提高政务融合系统的数据质量。提高政务融合系统的数据质量。

【技术实现步骤摘要】
政务系统数据清理方法和政务融合系统


[0001]本专利技术属于数据预处理
，尤其涉及一种政务系统数据清理方法和政务融合系统。

技术介绍

[0002]政务数据开放共享已经成为时代发展的必然趋势，在政务数据开放共享的过程中，数据的质量问题是影响数据价值的关键因素之一。
[0003]现有的政务系统，如民政部的婚姻登记系统、殡葬管理系统、儿童福利系统和流浪救助等系统，随着信息化的发展，政务数据经历了多次开发甚至迁移整合等，造成系统数据质量较差，如存在大量重复数据、不一致的数据等。以及，多个政务相关的系统需要进行数据的交互和融合，每个政务系统分别进行数据的存储，造成大量的冗余数据。
[0004]如何提高政务系统的数据质量，减小政务数据的存储压力，是现有技术急需解决的问题。

技术实现思路

[0005]有鉴于此，本专利技术提供了一种政务数据清理方法及政务融合系统，能够提高政务系统的数据质量。
[0006]本专利技术实施例的第一方面提供了一种政务数据清理方法，该方法应用于一种政务融合系统，所述政务融合系统包括云服务器和多个政务服务器，每个政务服务器对应一种政务系统，每个政务服务期存储有多个文本，该方法包括：
[0007]针对任一政务服务器，计算每个文本的摘要，将所述文本的摘要发送至云服务器；
[0008]所述云服务器接收每个政务服务器发送的文本的摘要，针对任一文本，存储所述文本的摘要和所述文本对应的政务服务器的标识信息；
[0009]所述政务服务器接收用户的上传文本或下载文本的请求，所述请求中包含目标文本的摘要；
[0010]所述政务服务器向所述云服务器发送确认请求消息，所述确认请求消息中包含所述目标文本的摘要；
[0011]所述云服务器通过所述目标文本的摘要对所述确认请求进行响应；
[0012]所述政务服务器根据所述云服务器的响应，处理所述用户的上传文本或下载文本的请求。
[0013]在一种可能的实现方式中，每个政务服务器通过相同的哈希算法计算每个文本的摘要，在所述云服务器接收每个政务服务器发送的文本的摘要之后，该方法还包括：
[0014]若存在至少两个相同的摘要，则保留其中的任意一个摘要；
[0015]或，获取每个政务服务器的存储空间信息，根据每个政务服务器的存储空间信息，保留其中的一个摘要。
[0016]在一种可能的实现方式中，针对任一政务服务器，在计算每个文本的摘要之前，该
方法还包括：
[0017]计算所有文本中任意两个文本的相似度，对于相似度大于等于预设阈值的两个文本，保留其中的一个文本。
[0018]在一种可能的实现方式中，所述计算所有文本中任意两个文本的相似度包括：
[0019]针对任一文本，获取所述文本对应的带有TF
‑
IDF权重的向量；
[0020]计算任意两个文本的向量的余弦相似度，得到所述任意两个文本的相似度。
[0021]在一种可能的实现方式中，若第一政务服务器接收用户的上传文本的请求，则该方法包括：
[0022]所述云服务器根据所述上传文本的请求中的目标文本的摘要，判断是否存储有与所述目标文本的摘要相同的摘要；
[0023]若存储有与所述目标文本的摘要相同的摘要，则向所述第一政务服务器发送第一响应消息，所述第一响应消息用于表示所述云服务器存储有与所述目标文本的摘要相同的摘要，所述第一政务服务器根据所述第一响应消息拒绝所述用户的上传文本的请求；
[0024]若没有存储与所述目标文本的摘要相同的摘要，则向所述第一政务服务器发送第二响应消息，所述第二响应消息用于表示所述云服务器没有存储与所述目标文本的摘要相同的摘要，所述第一政务服务器根据所述二响应消息同意所述用户的上传文本的请求。
[0025]在一种可能的实现方式中，在所述第一政务服务器根据所述二响应消息同意所述用户的上传文本的请求之后，该方法还包括：
[0026]所述第一政务服务器将所述目标文本的摘要发送至所述云服务器，以使得所述云服务器存储所述目标文本的摘要和所述第一政务服务器的标识信息。
[0027]在一种可能的实现方式中，若第一政务服务器接收到用户的下载文本的请求，则该方法包括：
[0028]所述云服务器根据所述下载文本的请求中的目标文本的摘要，判断是否存储有与所述目标文本的摘要相同的摘要；
[0029]若存储有与所述目标文本的摘要相同的摘要，则根据所述目标文本的摘要获取所述目标文本对应的政务服务器的标识信息；
[0030]向所述第一政务服务器发送第三响应消息，所述第三响应消息中包含所述目标文本对应的政务服务器的标识信息；
[0031]所述第一政务服务器根据所述第三响应消息，响应用户的下载文本的请求。
[0032]在一种可能的实现方式中，所述第一政务服务器根据所述第三响应消息，响应用户的下载文本的请求包括：
[0033]若所述目标文本对应的政务服务器为所述第一政务服务器，则所述第一政务服务器向用户发送所述目标文本；
[0034]若所述目标文本对应的政务服务器为第二政务服务器，则所述第一政务服务器向所述第二政务服务器发送文本获取请求，所述文本获取请求中包含所述目标文本的摘要，以使得所述第二政务服务器根据所述目标文本的摘要获取所述目标文本，发送至所述第一政务服务器，所述第一政务服务器将所述目标文本发送至用户。
[0035]本专利技术实施例的第二方面提供了一种政务融合系统，包括云服务器和多个政务服务器，每个政务服务器对应一种政务系统，每个政务服务期存储有多个文本，该系统用于：
[0036]针对任一政务服务器，计算每个文本的摘要，将所述文本的摘要发送至云服务器；
[0037]所述云服务器接收每个政务服务器发送的文本的摘要，针对任一文本，存储所述文本的摘要和所述文本对应的政务服务器的标识信息；
[0038]所述政务服务器接收用户的上传文本或下载文本的请求，所述请求中包含目标文本的摘要；
[0039]所述政务服务器向所述云服务器发送确认请求消息，所述确认请求消息中包含所述目标文本的摘要；
[0040]所述云服务器通过所述目标文本的摘要对所述确认请求进行响应；
[0041]所述政务服务器根据所述云服务器的响应，处理所述用户的上传文本或下载文本的请求。
[0042]在一种可能的实现方式中，每个政务服务器通过相同的哈希算法计算每个文本的摘要，在所述云服务器接收每个政务服务器发送的文本的摘要之后，所述云服务器还用于：
[0043]若存在至少两个相同的摘要，则保留其中的任意一个摘要；
[0044]或，获取每个政务服务器的存储空间信息，根据每个政务服务器的存储空间信息，保留其中的一个摘要。
[0045]本专利技术实施例提供一种政务数据清理方法和政务融合系统，通过一个云服务器对每个政务服务器的文本的摘要进行管理，使得每个政务服务器在处理用户的上传文本请本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种政务数据清理方法，其特征在于，该方法应用于一种政务融合系统，所述政务融合系统包括云服务器和多个政务服务器，每个政务服务器对应一种政务系统，每个政务服务期存储有多个文本，该方法包括：针对任一政务服务器，计算每个文本的摘要，将所述文本的摘要发送至云服务器；所述云服务器接收每个政务服务器发送的文本的摘要，针对任一文本，存储所述文本的摘要和所述文本对应的政务服务器的标识信息；所述政务服务器接收用户的上传文本或下载文本的请求，所述请求中包含目标文本的摘要；所述政务服务器向所述云服务器发送确认请求消息，所述确认请求消息中包含所述目标文本的摘要；所述云服务器通过所述目标文本的摘要对所述确认请求进行响应；所述政务服务器根据所述云服务器的响应，处理所述用户的上传文本或下载文本的请求。2.根据权利要求1所述的方法，特征在于，每个政务服务器通过相同的哈希算法计算每个文本的摘要，在所述云服务器接收每个政务服务器发送的文本的摘要之后，该方法还包括：若存在至少两个相同的摘要，则保留其中的任意一个摘要；或，获取每个政务服务器的存储空间信息，根据每个政务服务器的存储空间信息，保留其中的一个摘要。3.根据权利要求1所述的方法，其特征在于，针对任一政务服务器，在计算每个文本的摘要之前，该方法还包括：计算所有文本中任意两个文本的相似度，对于相似度大于等于预设阈值的两个文本，保留其中的一个文本。4.根据权利要求3所述的方法，其特征在于，所述计算所有文本中任意两个文本的相似度包括：针对任一文本，获取所述文本对应的带有TF
‑
IDF权重的向量；计算任意两个文本的向量的余弦相似度，得到所述任意两个文本的相似度。5.根据权利要求1至4任一项所述的方法，其特征在于，若第一政务服务器接收用户的上传文本的请求，则该方法包括：所述云服务器根据所述上传文本的请求中的目标文本的摘要，判断是否存储有与所述目标文本的摘要相同的摘要；若存储有与所述目标文本的摘要相同的摘要，则向所述第一政务服务器发送第一响应消息，所述第一响应消息用于表示所述云服务器存储有与所述目标文本的摘要相同的摘要，所述第一政务服务器根据所述第一响应消息拒绝所述用户的上传文本的请求；若没有存储与所述目标文本的摘要相同的摘要，则向所述第一政务服务器发送第二响应消息，所述第二响应消息用于表示所述云服务器没有存储与所述目标文本的摘要相同的摘要，所述第一政务服务器根据所述二响应消息同意所述用户的上传文本的请求。6.根据权利要求5所述的方法，其特征在于，在所述第一政务服务器根...

【专利技术属性】
技术研发人员：冷晓宁，王静茹，
申请(专利权)人：中科恒运股份有限公司，
类型：发明
国别省市：