一种甄别境外人员一人有多个证件号码的方法技术

本发明专利技术公开了一种甄别境外人员一人有多个证件号码的方法，包括以下步骤：S1、对原始数据进行采集；S2、将原始数据共性字段汇总至一起，去重后取并集数据；S3、利用业务规则和最长公共子串算法，将字段拼在一起，数据两两进行比对，为每条数据的相似度进行打分；S4、利用业务规则和分词算法，把句子按照字典切分成词，寻找词的最佳组合方式，为每个数据打上比对分数；S5、对计算后的数据分组排序，取序号为1并且分组最高的数据；S6、关联人像识别的数据，排除掉人证不一致的数据；S7、设置一定的阈值，将分数达到阈值线以上的数据提取至业务库中。本发明专利技术主要是通过对数据的关联、比对等技术，为出入境、边检等部门提供甄别境外人员唯一身份。份。份。

【技术实现步骤摘要】
一种甄别境外人员一人有多个证件号码的方法


[0001]本专利技术涉及数据分析
，更具体涉及一种甄别境外人员一人有多个证件号码的方法。

技术介绍

[0002][0003]全世界的护照号码参差不齐，没有统一的标准；很多情况下根本无法像中国人一样，通过身份证号码对身份进行查验，所以很难通过护照号码去判断身份的唯一性。
[0004]在以往工作过程中，工作人员对境外人员管理时，只能通过查询其他业务系统或者对境外人员当面询问，来发现是否有异常情况，整体的工作完全凭借个人经验，难以甄别信息的真实性。

技术实现思路

[0005]本专利技术需要解决的技术问题是提供一种甄别境外人员一人有多个证件号码的方法，以解决目前无法有效甄别境外人员一人有多个证件号码的问题，通过对数据的关联、比对等技术，为出入境、边检等部门提供甄别境外人员唯一身份。
[0006]为解决上述技术问题，本专利技术所采取的技术方案如下。
[0007]一种甄别境外人员一人有多个证件号码的方法，包括以下步骤：
[0008]S1、对原始数据进行采集；
[0009]S2、将步骤S1中原始数据共性字段汇总至一起，去重后取并集数据；
[0010]S3、利用业务规则和最长公共子串算法，将字段拼在一起，数据两两进行比对，并且为每条数据的相似度进行打分；
[0011]S4、利用业务规则和分词算法，把句子按照字典切分成词，寻找词的最佳组合方式，并且为每个数据打上比对分数；
[0012]S5、对步骤S3和步骤S4计算后的数据分组排序，取序号为1并且分组最高的数据；
[0013]S6、关联人像识别的数据，排除掉人证不一致的数据；
[0014]S7、设置一定的阈值，将分数达到阈值线以上的数据提取至业务库中。
[0015]进一步优化技术方案，所述原始数据包括出入境数据、签证数据。
[0016]进一步优化技术方案，在进行步骤S1后，针对不同来源数据标准不一的情况，制定统一的数据标准，按照相应的数据标准进行数据清洗和关联，形成标准库的数据。
[0017]进一步优化技术方案，所述步骤S3包括以下步骤：
[0018]将特定的数据转化为字符串，然后给定字符串的集合S＝{S1，...，S
K
}，其中 |S
i
|＝n
i
，∑n
i
＝N.；对于满足2≤k≤K的k，找出至少S是K个字符串的公共子串的最长串，最终为每个数据打上比对分数。
[0019]进一步优化技术方案，所述步骤S5中，利用row_number()开窗算法进行对步骤S3和步骤S4计算后的数据分组排序。
[0020]由于采用了以上技术方案，本专利技术所取得技术进步如下。
[0021]本专利技术主要是通过对数据的关联、比对等技术，为出入境、边检等部门提供甄别境外人员唯一身份。通过提供一种软件、数据规则相结合的方法，采集全省或某一区域所有的涉外数据，对数据分析、比对，根据业务规则和算法对数据进行打分，建立人员置信度等操作，最终汇聚至一起建立成一个业务数据模型，通过这个模型，可以快速地对境外人员的身份进行甄别，刻画出一个更加准确、详细的人像信息，辅助出入境、边检等部门日常的业务工作。
附图说明
[0022]图1为本专利技术的整体流程图；
[0023]图2为本专利技术对原始数据进行采集的示例数据图；
[0024]图3为本专利技术数据汇聚的示例数据图；
[0025]图4为本专利技术利用业务规则和最长公共子串算法对数据进行处理的示例数据图；
[0026]图5为本专利技术利用业务规则和分词算法对数据进行处理的示例数据图；
[0027]图6为本专利技术利用开窗算法对数据进行处理的示例数据图。
具体实施方式
[0028]下面将结合附图和具体实施例对本专利技术进行进一步详细说明。
[0029]本专利技术公开了一种甄别境外人员一人有多个证件号码的方法，在深入了解具体外管业务的情况下，结合业务人员的实战经验，通过提供一种软件、数据规则相结合的方法，通过采集全省或某一区域所有的涉外数据，对数据分析、比对，根据业务规则和算法对数据进行打分，建立人员置信度等操作，最终汇聚至一起建立成一个业务数据模型，通过这个模型，可以快速地对境外人员的身份进行甄别，刻画出一个更加准确、详细的人像信息，辅助出入境、边检等部门日常的业务工作。
[0030]结合图1所示，本专利技术具体包括以下步骤：
[0031]S1、对原始数据进行采集。通过服务接口、数据库同步、人工拷贝等多种不同的方式，将各个部门的数据采集至一起，形成“原始库”的数据。使用出入境数据、签证数据等作为原始数据，其他数据作为补充数据，示例数据如图2所示。
[0032]数据治理：在进行步骤S1后，针对不同来源数据标准不一的情况，制定统一的数据标准，然后按照相应的数据标准进行数据清洗和关联，形成标准库的数据。
[0033]S2、数据汇聚：根据业务要求，将适合建档的数据按照一定的数据标准汇总至一起，作为模型计算的基础数据。
[0034]将步骤S1中原始数据共性字段汇总至一起，去重后取并集数据，示例数据如图3所示。
[0035]将汇聚后的数据，按照业务规则要求，比如：证件号码不能为空，姓名不能为空等，以及加入最长公共子串、分词和row_number()开窗等不同的算法，将数据与业务规则、算法进行关联，比对。
[0036]S3、利用业务规则和最长公共子串算法，按照业务规则将姓名、性别等字段拼在一起，数据两两进行比对，并且为每条数据的相似度进行打分。
[0037]业务规则种类繁多，主要是根据实战需求和数据种类来制定，通常是将数据中的姓名、性别、出生日期等进行组合，结合不同的算法进行计算。
[0038]该步骤是将特定的数据转化为字符串，然后给定字符串的集合S＝{S1，...，S
K
}，其中|S
i
|＝n
i
，∑n
i
＝N.；对于满足2≤k≤K的k，找出至少S是K个字符串的公共子串的最长串，最终为每个数据打上比对分数。
[0039]比如：字符串"ABABC"，"BABCA"以及"ABCBA"，对这两个字符串进行计算，可以发现都包含了"ABC"，那么最长串"ABC"，那么这三个字符串的相似度为60％，示例数据如图4所示。
[0040]S4、利用业务规则和分词算法，主要基于词典的分词，先把句子按照字典切分成词，再寻找词的最佳组合方式。
[0041]其中，业务规则种类繁多，主要是根据实战需求和数据种类来制定，通常是将数据中的姓名、性别、出生日期等进行组合，结合不同的算法进行计算。
[0042]分词算法主要是将词组进行切分，然后对切分后的数据进行匹配。
[0043]比如：姓名“AB ABC”以及“ABC AB”，按照空格将每个词组进行拆分，然后再进行关联、比对，最后可本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种甄别境外人员一人有多个证件号码的方法，其特征在于，包括以下步骤：S1、对原始数据进行采集；S2、将步骤S1中原始数据共性字段汇总至一起，去重后取并集数据；S3、利用业务规则和最长公共子串算法，将字段拼在一起，数据两两进行比对，并且为每条数据的相似度进行打分；S4、利用业务规则和分词算法，把句子按照字典切分成词，寻找词的最佳组合方式，并且为每个数据打上比对分数；S5、对步骤S3和步骤S4计算后的数据分组排序，取序号为1并且分组最高的数据；S6、关联人像识别的数据，排除掉人证不一致的数据；S7、设置一定的阈值，将分数达到阈值线以上的数据提取至业务库中。2.根据权利要求1所述的一种甄别境外人员一人有多个证件号码的方法，其特征在于，所述原始数据包括出入境数据、签证数据。3.根据权利要求1所述的一种甄别境外人员一人有多个证件号码的方法，...

【专利技术属性】
技术研发人员：杨刚，苏文辉，翟永强，李东和，陈海发，龚波，苏学武，水军，
申请(专利权)人：珠海市新德汇信息技术有限公司，
类型：发明
国别省市：