一种视频面试信息的数据处理方法、装置和电子设备制造方法及图纸

本发明专利技术涉及商业面试信息处理技术领域，提供了一种视频面试信息的数据处理方法、装置和电子设备，包括将视频分解为音频文件和视频文件，将音频文件转换为文本文件；提取视频中多个预定时刻的视频帧图像，识别每个视频帧图像对应的年龄数据和容貌数据，将多个视频帧图像对应的平均年龄数据和平均容貌数据作为图像特征；计算音频特征；计算得到文本特征；将文本文件输入至语言表征模型中，获得语义特征；将所述图像特征、音频特征、文本特征和语义特征输入至预先训练的胜任力模型中，获得面试者的评估结果，胜任力模型包括多个职场因素，评估结果根据多个职场因素的预测分值获得。本发明专利技术区分度高，灵活性强，鲁棒性好，评估结果准确。评估结果准确。评估结果准确。

【技术实现步骤摘要】
一种视频面试信息的数据处理方法、装置和电子设备


[0001]本专利技术一般涉及商业面试信息处理
，具体涉及一种视频面试信息的数据处理方法、装置和电子设备。

技术介绍

[0002]作为招聘的重要环节，面试需要消耗大量人力和物力，是这个过程中最为冗长的阶段。同时由于面试极具主观性，不同面试官具有不同的经验和判断标准，因此最终的面试结果也会千差万别。目前，相关技术通过人工智能(Artificial Intelligence，AI)的方式进行视频面试，但所提取的特征单一、区分度低，并且选拔具有企业特异性，极大地限制了适用范围，灵活性弱。

技术实现思路

[0003]鉴于相关技术中的上述缺陷或不足，期望提供一种视频面试信息的数据处理方法、装置和电子设备，其区分度高，适用范围广泛，灵活性强，鲁棒性好。
[0004]第一方面，本专利技术提供了一种视频面试信息的数据处理方法，其特征在于，所述方法包括：
[0005]将面试视频分解为音频文件和视频文件，并将所述音频文件转换为文本文件；
[0006]提取所述视频文件中多个预定时刻的视频帧图像，识别每个视频帧图像对应的年龄特征数据和容貌特征数据，将多个视频帧图像对应的平均年龄特征数据和平均容貌特征数据作为图像特征；计算所述音频文件中的音频参数，得到所述音频参数组合形成的音频特征；对所述文本文件进行分词，并统计各种不同类别字符的数量以及每句话的词数和字符数，计算得到文本特征；将所述文本文件输入至预先训练的语言表征模型中，获得语义特征；
[0007]将所述图像特征、音频特征、文本特征和语义特征输入至预先训练的胜任力模型中，获得所述面试者的评估结果，其中所述胜任力模型包括多个职场因素，所述评估结果根据所述多个职场因素的预测分值获得。
[0008]进一步的，所述职场因素通过如下方式得到：
[0009]根据历史面试数据筛选出多个面试维度；
[0010]将所述面试维度分解为多个含义单一的特定描述的词汇；
[0011]去除所述特定描述的词汇中的无效部分，得到施测词汇表；
[0012]对所述施测词汇表中的词汇进行评定；
[0013]对评定后的施测词汇表中的词汇进行主成分分析，确定所述职场因素。
[0014]进一步的，所述音频参数包括占空比、音频中断次数、共振峰、声音能量、标准差、最大值、最小值和/或分布曲线对应峰值。
[0015]进一步的，所述职场因素包括好奇、服从、决断、担当、耐挫、赋能、成就、淡定、轻松、同理心、利他、秩序、行动、踏实、变通、激情、精准、合作、创新和/或逻辑。
[0016]进一步的，所述胜任力模型为XGBoost模型。
[0017]本专利技术的第二方面，还提供了一种视频面试信息的数据处理装置，包括：
[0018]视频处理模块，被配置为将面试视频分解为音频文件和视频文件，并将所述音频文件转换为文本文件；
[0019]特征提取模块，被配置为提取所述视频文件中多个预定时刻的视频帧图像，识别每个视频帧图像对应的年龄特征数据和容貌特征数据，将多个视频帧图像对应的平均年龄特征数据和平均容貌特征数据作为图像特征；计算所述音频文件中的音频参数，得到所述音频参数组合形成的音频特征；对所述文本文件进行分词，并统计各种不同类别字符的数量以及每句话的词数和字符数，计算得到文本特征；将所述文本文件输入至预先训练的语言表征模型中，获得语义特征；
[0020]评估模块，被配置为将所述图像特征、音频特征、文本特征和语义特征输入至预先训练的胜任力模型中，获得所述面试者的评估结果，其中所述胜任力模型包括多个职场因素，所述评估结果根据所述多个职场因素的预测分值获得。
[0021]进一步的，还包括职场因素获得模块，被配置为：
[0022]将所述面试维度分解为多个含义单一的特定描述的词汇；
[0023]去除所述特定描述的词汇中的无效部分，得到施测词汇表；
[0024]对所述施测词汇表中的词汇进行评定；
[0025]对评定后的施测词汇表中的词汇进行主成分分析，确定所述职场因素。
[0026]进一步的，所述音频参数包括占空比、音频中断次数、共振峰、声音能量、标准差、最大值、最小值和/或分布曲线对应峰值。
[0027]进一步的，所述职场因素包括好奇、服从、决断、担当、耐挫、赋能、成就、淡定、轻松、同理心、利他、秩序、行动、踏实、变通、激情、精准、合作、创新和/或逻辑。
[0028]本专利技术的第三方面，还提供了一种电子设备，包括：
[0029]处理器和存储器，
[0030]所述存储器中存储有至少一条指令、至少一段程序、代码集或指令集，所述指令、所述程序、所述代码集或所述指令集由所述处理器加载并执行以实现上述视频面试信息的数据处理方法。
[0031]本专利技术的第四方面，还提供一种计算机可读存储介质，所述计算机可读存储介质存储有一个或者多个程序，所述一个或者多个程序可被一个或者多个处理器执行，以实现第一方面中任意一项所述的视频面试信息的数据处理方法的步骤。
[0032]从以上技术方案可以看出，本专利技术实施例具有以下优点：
[0033]本专利技术实施例提供了一种视频面试信息的数据处理方法、装置、电子设备及存储介质，通过提取面试视频的语音类特征和图像类特征等多模态特征，能够充分利用和发挥视频资源，具有全面性，区分度高，进而将语音类特征和图像类特征输入预先训练的包括多个职场因素的胜任力模型中，获得面试者的评估结果，该评估结果根据多个职场因素的预测分值加权组合得到，也就是说职场因素颗粒度更小，更为细腻，使得用户可以根据不同应用需求来动态设置职场因素的重要程度，适用范围广泛，灵活性强，鲁棒性好。
附图说明
[0034]通过阅读参照以下附图所作的对非限制性实施例所作的详细描述，本专利技术的其它特征、目的和优点将会变得更明显：
[0035]图1为本专利技术实施例提供的一种视频面试信息的数据处理方法的流程示意图；
[0036]图2为本专利技术实施例提供的一种视频面试信息的数据处理装置的结构示意图；
[0037]图3为本专利技术实施例提供的一种视频面试信息的数据处理装置的另一结构示意图；
[0038]图4位本专利技术实施例提供的电子设备的结构示意图。
具体实施方式
[0039]为了使本
的人员更好地理解本专利技术方案，下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例，都属于本专利技术保护的范围。
[0040]本专利技术的说明书及上述附图中的术语“第一”、“第二”、“第三”、“第四”等(如果存在)是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便描述的本专利技术的实施例能够以除了本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种视频面试信息的数据处理方法，其特征在于，所述方法包括：将面试视频分解为音频文件和视频文件，并将所述音频文件转换为文本文件；提取所述视频文件中多个预定时刻的视频帧图像，识别每个视频帧图像对应的年龄特征数据和容貌特征数据，将多个视频帧图像对应的平均年龄特征数据和平均容貌特征数据作为图像特征；计算所述音频文件中的音频参数，得到所述音频参数组合形成的音频特征；对所述文本文件进行分词，并统计各种不同类别字符的数量以及每句话的词数和字符数，计算得到文本特征；将所述文本文件输入至预先训练的语言表征模型中，获得语义特征；将所述图像特征、音频特征、文本特征和语义特征输入至预先训练的胜任力模型中，获得所述面试者的评估结果，其中所述胜任力模型包括多个职场因素，所述评估结果根据所述多个职场因素的预测分值获得。2.根据权利要求1所述的一种视频面试信息的数据处理方法，其特征在于，所述职场因素通过如下方式得到：根据历史面试数据筛选出多个面试维度；将所述面试维度分解为多个含义单一的特定描述的词汇；去除所述特定描述的词汇中的无效部分，得到施测词汇表；对所述施测词汇表中的词汇进行评定；对评定后的施测词汇表中的词汇进行主成分分析，确定所述职场因素。3.根据权利要求1所述的一种视频面试信息的数据处理方法，其特征在于，所述音频参数包括占空比、音频中断次数、共振峰、声音能量、标准差、最大值、最小值和/或分布曲线对应峰值。4.根据权利要求1所述的一种视频面试信息的数据处理方法，其特征在于，所述职场因素包括好奇、服从、决断、担当、耐挫、赋能、成就、淡定、轻松、同理心、利他、秩序、行动、踏实、变通、激情、精准、合作、创新和/或逻辑。5.根据权利要求1所述的一种视频面试信息的数据处理方法，其特征在于，所述胜任力模型为XGBoost模型。6.一种视频面试信息的数据处理装置，其特征在于，包括：视频处理模块，被配置为将面试视频分解为音...

【专利技术属性】
技术研发人员：戴科彬，肖婷，
申请(专利权)人：同道精英天津信息技术有限公司，
类型：发明
国别省市：