本申请公开了一种手语库的调优方法，包括：提供内置基础数据表的手语库；在所述手语库中提供用户数据表，所述用户数据表用于存储带有情绪类型的情绪手语数据；获取目标用户提供的手语样本，所述手语样本包括样本单词、样本情绪类型和样本手语视频；根据所述样本手语视频学习得到样本手语动作和样本动作执行时间；根据所述样本单词、样本情绪类型、样本手语动作和样本动作执行时间，更新所述用户数据表；其中，在提供手语库服务时，所述用户数据表为高优先级，所述基础数据表为低优先级。本申请提供的技术方案可以使用户能够及时地匹配到正确语义，以及用更低成本传达情绪。以及用更低成本传达情绪。以及用更低成本传达情绪。
【技术实现步骤摘要】
手语库的调优方法及装置
[0001]本申请涉及人工智能领域，尤其涉及一种手语库的调优方法、装置、计算机设备和计算机可读存储介质。
技术介绍
[0002]随着计算机技术的迅速发展，相关手语识别领域也在迅速发展。手语识别是通过计算机视觉技术，识别手势所要表达的意义。该技术可与语音识别、自然语言处理、语音播报等相结合，应用于聋哑人士社交场景，使聋哑人能正常与人交流。
[0003]相关的生成模拟手语在机器学习的基础上具有普适性，但如同字迹和语音一样，由于每个人的读写习惯存在着差异，用户可能需要较长时间去适应单一的手语语词库内的手语表现，当限制时间内的信息量增大，手语模拟演示的速率增加，则需要用户有更快的反应速度，用户常常无法及时地匹配到正确语义。且，使用单纯的语词
‑
手势模型动画模拟进行手语的表达存在着信息接受不全面的问题，如无法对于用户的情绪进行识别与表达。而更加精微的手语模拟技术更倾向于通过面部表情辅助实现情绪的传达，但微表情的捕捉与表现成本高。
技术实现思路
[0004]本申请实施例的目的是提供一种手语库的调优方法、装置、计算机设备以及计算机可读存储介质，可以用于解决上文所述的问题。
[0005]本申请实施例的一个方面提供了一种手语库的调优方法，包括：
[0006]提供内置基础数据表的手语库；其中，所述基础数据表包括多条基础手语数据，每条基础手语数据包括单词以及与该单词映射的手语动作和动作执行时间；
[0007]在所述手语库中提供用户数据表，所述用户数据表用于存储带有情绪类型的情绪手语数据；
[0008]获取目标用户提供的手语样本，所述手语样本包括样本单词、样本情绪类型和样本手语视频；
[0009]根据所述样本手语视频学习得到样本手语动作和样本动作执行时间；
[0010]根据所述样本单词、样本情绪类型、样本手语动作和样本动作执行时间，更新所述用户数据表；
[0011]其中，在提供手语库服务时，所述用户数据表为高优先级，所述基础数据表为低优先级。
[0012]优选地，还包括：
[0013]根据所述基础数据表中每条基础手语数据中的动作执行时间，将所述多条基础手语数据分为多个手语组；
[0014]将分组后的基础数据表复制多份，得到与多个情绪类型一一对应的多个情绪数据表。
[0015]优选地，还包括：
[0016]根据所述样本情绪类型，从所述多个情绪数据表中确定目标情绪数据表；
[0017]从所述目标情绪数据表中，确定所述样本单词所在的目标手语组；
[0018]对所述目标手语组中的至少部分单词进行调整，以得到所述至少部分单词各自的优化手语数据；
[0019]根据所述至少部分单词中每个单词对应的优化手语数据，更新所述目标用户数据表。
[0020]优选地，所述对所述目标手语组中的至少部分单词进行调整，以得到所述至少部分单词各自的优化手语数据，包括：
[0021]根据所述样本动作执行时间，批量调整所述至少部分单词中每个单词的动作执行时间。
[0022]优选地，所述用户数据表包括多条情绪手语数据，至少部分所述多条情绪手语数据配置有冻结标识；所述方法还包括：
[0023]确定所述目标组中的特定单词，将该特定单词排除在调整范围之外；
[0024]其中，所述特定单词为同时位于所述用户数据表中的单词，且携带有所述冻结标识。
[0025]优选地，所述根据所述样本手语视频学习得到样本手语动作和样本动作执行时间，包括：
[0026]识别所述样本手语视频，以获取多个手语表达关键帧；
[0027]根据所述多个手语表达关键帧，获取所述目标用户在所述样本情绪类型下的样本动作执行时间。
[0028]优选地，还包括：
[0029]以预设规律，向所述目标用户和/或其他用户推送录制手语样本的任务请求；
[0030]其中，所述任务请求包括待录制手语分别对应的待录制单词和待录制情绪类型。
[0031]优选地，还包括：为响应所述任务请求的用户提供电子奖励。
[0032]优选地，还包括：
[0033]在所述手语库中的词库优化率达到阈值比率的情况下，向所述目标用户推送手语阅读挑战任务；
[0034]根据所述目标用户针对所述手语阅读挑战任务的回复，对所述回复进行评估；及
[0035]根据评估结果，为所述目标用户提供电子奖励。
[0036]优选地，还包括：
[0037]将所述目标用户的手语库提供给下载平台；及
[0038]根据所述目标用户的手语库被下载次数，为所述目标用户提供相应的电子奖励。
[0039]本申请实施例的一个方面又提供了一种手语库的调优装置，包括：
[0040]第一提供模块，用于提供内置基础数据表的手语库；其中，所述基础数据表包括多条基础手语数据，每条基础手语数据包括单词以及与该单词映射的手语动作和动作执行时间；
[0041]第二提供模块，用于在所述手语库中提供用户数据表，所述用户数据表用于存储带有情绪类型的情绪手语数据；
[0042]获取模块，用于获取目标用户提供的手语样本，所述手语样本包括样本单词、样本情绪类型和样本手语视频；
[0043]学习模块，用于根据所述样本手语视频学习得到样本手语动作和样本动作执行时间；
[0044]优化模块，用于根据所述样本单词、样本情绪类型、样本手语动作和样本动作执行时间，更新所述用户数据表；
[0045]其中，在提供手语库服务时，所述用户数据表为高优先级，所述基础数据表为低优先级。
[0046]本申请实施例的一个方面又提供了一种计算机设备，所述计算机设备包括存储器、处理器以及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述计算机程序时用于实现如上述手语库的调优方法的步骤。
[0047]本申请实施例的一个方面又提供了一种计算机可读存储介质，所述计算机可读存储介质内存储有计算机程序，所述计算机程序可被至少一个处理器所执行，以使所述至少一个处理器执行如上述手语库的调优方法的步骤。
[0048]本申请实施例提供的手语库的调优方法、装置、计算机设备以及计算机可读存储介质，包括如下优点：
[0049](1)可以通过手语样本将目标用户自己习惯的手语更新到用户数据表中，即对手语库个性化调优，从而帮忙目标用户能够通过快速准确匹配到手语动作的语义。
[0050](2)不同的情绪类型对应的单个手语动作具有不同的动作速率(动作执行时间)，在本实施例中：以手语动作在不同情绪下的动作速率不同为立足点，具体的：可以接收“目标用户提供的该样本情绪类型下的样本单词的样本手语”，根据样本手语得到样本单词、样本情绪类型、样本手语动作和样本动作执行时间，然后基于上述得到的数据更新所述用户数据表。因此，所述手语库提供服务时，可以优先通过所述用户数据表匹配情绪类型和手语动作/单词。如果本文档来自技高网...
【技术保护点】
【技术特征摘要】
1.一种手语库的调优方法，其特征在于，包括：提供内置基础数据表的手语库；其中，所述基础数据表包括多条基础手语数据，每条基础手语数据包括单词以及与该单词映射的手语动作和动作执行时间；在所述手语库中提供用户数据表，所述用户数据表用于存储带有情绪类型的情绪手语数据；获取目标用户提供的手语样本，所述手语样本包括样本单词、样本情绪类型和样本手语视频；根据所述样本手语视频学习得到样本手语动作和样本动作执行时间；根据所述样本单词、样本情绪类型、样本手语动作和样本动作执行时间，更新所述用户数据表；其中，在提供手语库服务时，所述用户数据表为高优先级，所述基础数据表为低优先级。2.根据权利要求1所述的手语库的调优方法，其特征在于，还包括：根据所述基础数据表中每条基础手语数据中的动作执行时间，将所述多条基础手语数据分为多个手语组；将分组后的基础数据表复制多份，得到与多个情绪类型一一对应的多个情绪数据表。3.根据权利要求2所述的手语库的调优方法，其特征在于，还包括：根据所述样本情绪类型，从所述多个情绪数据表中确定目标情绪数据表；从所述目标情绪数据表中，确定所述样本单词所在的目标手语组；对所述目标手语组中的至少部分单词进行调整，以得到所述至少部分单词各自的优化手语数据；根据所述至少部分单词中每个单词对应的优化手语数据，更新所述目标用户数据表。4.根据权利要求3所述的手语库的调优方法，其特征在于，所述对所述目标手语组中的至少部分单词进行调整，以得到所述至少部分单词各自的优化手语数据，包括：根据所述样本动作执行时间，批量调整所述至少部分单词中每个单词的动作执行时间。5.根据权利要求3所述的手语库的调优方法，其特征在于，所述用户数据表包括多条情绪手语数据，至少部分所述多条情绪手语数据配置有冻结标识；所述方法还包括：确定所述目标组中的特定单词，将该特定单词排除在调整范围之外；其中，所述特定单词为同时位于所述用户数据表中的单词，且携带有所述冻结标识。6.根据权利要求1至5任一项所述的手语库的调优方法，其特征在于，所述根据所述样本手语视频学习得到样本手语动作和样本动作执行时间，包括：识别所述样本手语视频，以获取多个手语表达关键帧；根据所述多个手语表达关键帧，获取所述目标用户在所述样本...
【专利技术属性】
技术研发人员：郭新月，王斌，俞泓飞，华达，钱程，李顺，杨家栋，
申请(专利权)人：上海幻电信息科技有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。