一种多角色身份识别方法、装置及存储介质制造方法及图纸

本申请公开了一种多角色身份识别方法、装置及存储介质，其中该方法，包括：获取待检测的视频文件以及与所述视频文件对应的随路数据，其中所述随路数据包括各个角色的人脸图片、识别策略和抽帧策略；使用人脸检测算法，从各个角色的人脸图片中提取出各个角色的人脸区域图像；按照所述抽帧策略从所述视频文件中提取各个视频帧图片；根据所述识别策略、各个角色的人脸区域图像以及各个视频帧图片，对所述视频文件中的各个人脸进行角色识别和区域识别，得到角色识别结果和区域识别结果；根据所述角色识别结果和所述区域识别结果，确定所述视频文件中的各个人脸的身份信息。文件中的各个人脸的身份信息。文件中的各个人脸的身份信息。

【技术实现步骤摘要】
一种多角色身份识别方法、装置及存储介质


[0001]本申请涉及身份识别
，特别是涉及一种多角色身份识别方法、装置及存储介质。

技术介绍

[0002]双录(即录音录像)是银监会的硬性规定，一方面避免信托公司或者三方理财销售人员在跟客户沟通过程中出现虚假承诺、违规保本宣传的现象，另一方面也是对投资者风险承受能力、产品风险认识的再提醒，其初衷仍然是为了保护投资者。
[0003]但是由于金融市场是一个具有庞大用户受众群体的市场，任何一家公司都无法通过其自身的专营渠道完成所有金融产品的销售工作，为了提高市场的占有率，几乎所有的行方或保司都会采取自营+合作伙伴分销的方式进行多渠道销售同一个产品，在此合作模式下就面临一个合规问题，即：如果客户是通过自营渠道购买理财或保险产品，是会通过行方或保司的线上系统进行交易，此过程会严格按照合规流程进行录音录像且实时做合规检测。但是合作伙伴的售卖渠道就面临不一样的情况，由于合作伙伴的技术储备及成本问题，无法为客户提供实时的合规记录能力，只能通过线下录像的方式，在交易完成后将视频上传到保司或行方的系统中，这一部分的业务就面临很大的合规风险。
[0004]为了解决双录视频合规问题，银保监会要求各金融机构，需要建立相应的离线合规检测系统，通过对双录视频进行全量的合规检测校验，保证双录视频的合法合规。离线质检系统中的检测项分为两大类(视觉识别和语音识别)，其中视觉识别类中，有人员数量检测，人员身份检测，是否有多人闯入检测，是否有人中途离场检测等，其中对视频中的人员角色识别，由于视频是一个动态的过程，要检测其中的人员身份具有一定的难度，无法对视频中的人物身份进行准确识别。此外，现有的通过将完整的视频推送到AI算法中，通过算法对视频进行识别的方案，由于将离线视频全部都推送给算法进行识别，对算法服务的压力比较大，且视觉识别类的算法对服务器gpu有较高要求，故而造成硬件成本较高，且识别效率也低。
[0005]针对上述的现有技术中存在的无法对视频中的人物身份进行准确识别以及识别效率低的技术问题，目前尚未提出有效的解决方案。

技术实现思路

[0006]本专利技术的实施例提供了一种多角色身份识别方法、装置及存储介质，以至少解决现有技术中存在的无法对视频中的人物身份进行准确识别的技术问题。
[0007]根据本专利技术实施例的一个方面，提供了一种多角色身份识别方法，包括：获取待检测的视频文件以及与所述视频文件对应的随路数据，其中所述随路数据包括各个角色的人脸图片、识别策略和抽帧策略；使用人脸检测算法，从各个角色的人脸图片中提取出各个角色的人脸区域图像；按照所述抽帧策略从所述视频文件中提取各个视频帧图片；根据所述识别策略、各个角色的人脸区域图像以及各个视频帧图片，对所述视频文件中的各个人脸
进行角色识别和区域识别，得到角色识别结果和区域识别结果；根据所述角色识别结果和所述区域识别结果，确定所述视频文件中的各个人脸的身份信息。
[0008]可选地，使用人脸检测算法，从各个角色的人脸图片中提取出各个角色的人脸区域图像，包括：使用人脸在框检测算法，识别各个角色的人脸图片是否存在人脸区域，并在存在人脸区域的情况下返回各个角色的人脸坐标；根据所述人脸坐标，从各个角色的人脸图片中提取出各个角色的人脸区域图像。
[0009]可选地，从各个角色的人脸图片中提取出各个角色的人脸区域图像之后，该方法还包括：将提取到的各个角色的人脸区域图像进行交叉比对，根据交叉比对的结果判断是否存在相同的人脸；在判断不存在相同的人脸的情况下，将各个角色的人脸区域图像进行编码，并使用编码后的各个角色的人脸区域图像替换掉所述随路数据中各个角色的人脸图片；在判断存在相同的人脸的情况下，返回错误提示信息，其中所述错误提示信息用于提示待识别的角色重复。
[0010]可选地，按照所述抽帧策略从所述视频文件中提取各个视频帧图片，包括：按照所述抽帧策略中的第一提取策略，从所述视频文件中提取所有的关键帧图片；按照所述抽帧策略中的第二提取策略，按照时长和帧数从所述视频文件中提取对应的视频帧图片；按照所述抽帧策略中的第三提取策略，按照开始时间和持续时长从所述视频文件中提取对应的视频帧图片；或者按照所述抽帧策略中的第四提取策略，按照间隔时长和帧数从所述视频文件中提取对应的视频帧图片。
[0011]可选地，根据所述识别策略、各个角色的人脸区域图像以及各个视频帧图片，对所述视频文件中的各个人脸进行角色识别，得到角色识别结果，包括：使用人脸在框检测算法，对各个视频帧图片进行人脸数量识别，确定每张所述视频帧图片中的人脸数量以及对应的人脸坐标；将每张视频帧图片中的人脸数量以及对应的人脸坐标与各个角色的人脸区域图像中的人脸数量和对应的人脸坐标进行比对；根据比对的结果，确定每张视频帧图片的角色识别结果。
[0012]可选地，根据所述识别策略、各个角色的人脸区域图像以及各个视频帧图片，对所述视频文件中的各个人脸进行区域识别，得到区域识别结果，包括：将各个视频帧图片依次送入人脸在框检测算法，确定每张视频帧图片的人脸数量以及对应的人脸坐标，直至所述人脸在框检测算法识别到的人脸数量与所有角色的人脸区域图像包含的人脸数量相等；根据所述人脸在框检测算法识别到的人脸数量以及对应的人脸坐标，从对应的视频帧图片中提取出人脸图片；将提取出的人脸图片与各个角色的人脸区域图像进行对比，根据比对的结果确定所述视频文件中每个人脸的角色信息；根据所述视频文件中每个人脸的角色信息以及所述人脸在框检测算法识别到的人脸坐标，确定各个角色在所述视频文件中的区域位置；对提取的所有视频帧图片进行人脸在框检测，得到每张视频帧图片中的人脸坐标信息；将各个角色在所述视频文件中的区域位置与每张视频帧图片中的人脸坐标信息进行比对，根据比对结果判断每个区域位置是否识别到对应的角色，得到区域识别结果。
[0013]可选地，将各个视频帧图片依次送入人脸在框检测算法，确定每张视频帧图片的人脸数量以及对应的人脸坐标，直至所述人脸在框检测算法识别到的人脸数量与所有角色的人脸区域图像包含的人脸数量相等，包括：将从所述视频文件中提取的第一张视频帧图片送入人脸在框检测算法，得到第一张视频帧图片的人脸数量以及对应的人脸坐标；在第
一张视频帧图片的人脸数量小于所有角色的人脸区域图像包含的人脸数量的情况下，继续将下一张视频帧图片送入人脸在框检测算法，得到下一张视频帧图片的人脸数量以及对应的人脸坐标，直至所述人脸在框检测算法识别到的人脸数量与所有角色的人脸区域图像包含的人脸数量相等。
[0014]根据本专利技术实施例的另一个方面，还提供了一种存储介质，存储介质包括存储的程序，其中，在程序运行时由处理器执行以上任意一项所述的方法。
[0015]根据本专利技术实施例的另一个方面，还提供了一种多角色身份识别装置，包括：获取模块，用于获取待检测的视频文件以及与所述视频文件对应的随路数据，其中所述随路数据包括各个角色的人脸图片、识别策略和抽帧策略；提取模块，用于使用人脸检测算法，从各个角色的人脸图本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种多角色身份识别方法，其特征在于，包括：获取待检测的视频文件以及与所述视频文件对应的随路数据，其中所述随路数据包括各个角色的人脸图片、识别策略和抽帧策略；使用人脸检测算法，从各个角色的人脸图片中提取出各个角色的人脸区域图像；按照所述抽帧策略从所述视频文件中提取各个视频帧图片；根据所述识别策略、各个角色的人脸区域图像以及各个视频帧图片，对所述视频文件中的各个人脸进行角色识别和区域识别，得到角色识别结果和区域识别结果；根据所述角色识别结果和所述区域识别结果，确定所述视频文件中的各个人脸的身份信息。2.根据权利要求1所述的方法，其特征在于，使用人脸检测算法，从各个角色的人脸图片中提取出各个角色的人脸区域图像，包括：使用人脸在框检测算法，识别各个角色的人脸图片是否存在人脸区域，并在存在人脸区域的情况下返回各个角色的人脸坐标；根据所述人脸坐标，从各个角色的人脸图片中提取出各个角色的人脸区域图像。3.根据权利要求2所述的方法，其特征在于，从各个角色的人脸图片中提取出各个角色的人脸区域图像之后，还包括：将提取到的各个角色的人脸区域图像进行交叉比对，根据交叉比对的结果判断是否存在相同的人脸；在判断不存在相同的人脸的情况下，将各个角色的人脸区域图像进行编码，并使用编码后的各个角色的人脸区域图像替换掉所述随路数据中各个角色的人脸图片；在判断存在相同的人脸的情况下，返回错误提示信息，其中所述错误提示信息用于提示待识别的角色重复。4.根据权利要求1所述的方法，其特征在于，按照所述抽帧策略从所述视频文件中提取各个视频帧图片，包括：按照所述抽帧策略中的第一提取策略，从所述视频文件中提取所有的关键帧图片；按照所述抽帧策略中的第二提取策略，按照时长和帧数从所述视频文件中提取对应的视频帧图片；按照所述抽帧策略中的第三提取策略，按照开始时间和持续时长从所述视频文件中提取对应的视频帧图片；或者按照所述抽帧策略中的第四提取策略，按照间隔时长和帧数从所述视频文件中提取对应的视频帧图片。5.根据权利要求1所述的方法，其特征在于，根据所述识别策略、各个角色的人脸区域图像以及各个视频帧图片，对所述视频文件中的各个人脸进行角色识别，得到角色识别结果，包括：使用人脸在框检测算法，对各个视频帧图片进行人脸数量识别，确定每张所述视频帧图片中的人脸数量以及对应的人脸坐标；将每张视频帧图片中的人脸数量以及对应的人脸坐标与各个角色的人脸区域图像中的人脸数量和对应的人脸坐标进行比对；根据比对的结果，确定每张视频帧图片的角色识别结果。
6.根据权利要求1所述的方法，其特征在于，根据所述识别策略、各个角色的人脸区域图像以及各个视频帧图片，对所述视频文件中的各个人脸进行区域识别，得到区域识别结果，包括：将各个视频帧图片依次送入人脸在框检测算法，确定每张视频帧图片的人脸数量以及对应的人脸坐标，直至所述人脸在框检测算法识别到的人脸数量与所有角色的人脸区域图像包含的人...

【专利技术属性】
技术研发人员：张鹏飞，曲玉妹，陈绍柱，井绪海，周健，夏溧，
申请(专利权)人：北京中关村科金技术有限公司，
类型：发明
国别省市：