移动设备及通话方法技术

本发明专利技术公开了一种移动设备及通话方法，上述移动设备包括：图像获取模块，用于获取用户的人脸图像；表情获取模块，用于从图像获取模块获取的人脸图像中提取用户的表情信息；表情语音查询模块，用于通过将表情信息与表情语音数据库进行匹配，以查找到对应的语音，其中，表情语音数据库用于存储表情与语音的对应关系；语音模块，用于播放表情语音查询模块查找到的语音。本发明专利技术使具有语言障碍的人能够实现与正常人进行简单的会话交流，使交流变得更方便、快捷。

【技术实现步骤摘要】

本专利技术涉及通信领域，具体而言，涉及一种。
技术介绍
随着通信技术的发展，移动设备(例如，手机)已经成为人们 日常工作和生活中必不可少的工具，^昔助于移动i殳备，人们无i仑^f可时何地都可以方i更快捷的找到对方。随着移动设备的普及，移动设备的输入方法也得到了快速的发 展，从最初的键盘输入到触摸屏输入，再到目前的语音输入，方式 更加多样化。然而，虽然移动设备的发展日新月异，功能也越来越 强大，但是目前大部分移动设备都是为普通人设计的，对于一些无 法用语言来表达自己感情的人来说，移动设备无疑只是一个玩具， 无法从中享受到任何便利，同时也限制了移动设备的使用范围。这 样特殊的人群需要得到人们更多的关注，同时也希望能够与他人进行更多的交流，在发生困难需要寻求帮助时可以更快的得到其他人 的帮助。现有技术中，并未提供无法用语言表达情感的人群所能够使用 的移动i殳备，因此，才是供一种无法用语言表达情感的特殊人群能够 使用的移动设备是非常必要的。
技术实现思路
针对相关技术中未提供无法用语言表达情感的人群所能够使用 的移动设备的问题而提出本专利技术，为此，本专利技术的主要目的在于提 供一种移动i殳备及通纟舌方法，以解决上述问题至少之一。为了实现上述目的，才艮据本专利技术的一个方面，才是供了一种移动 设备。根据本专利技术的移动设备包括图像获取模块，用于获取用户的 人脸图像；表情获取模块，用于从图像获取模块获取的人脸图像中 提取用户的表情信息；表情语音查询模块，用于通过将表情信息与 表情语音数据库进行匹配，以查找到对应的语音，其中，表情语音 数据库用于存储表情与语音的对应关系；语音模块，用于播放表情语音查询模块查找到的语音。优选地，表情获取模块还用于从人脸图像中提取人脸特征信息， 在人脸特4正信息与用户特4正信息库不匹配的情况下，确定用户是首 次通话，其中，用户特征信息库存储有使用过移动设备的用户的人 脸特征信息；表情获取模块还用于在表情获取模块确定用户是首次 通话的情况下，通过对用户的表情进行采集，将用户的专用的表情 与语音的对应关系加入表情i吾音翁:据库。优选地，表情获取模块还用于使用自动跟踪器对用户的预定脸 部特征进行跟踪，提取表情的运动特征，并识别表情信息。优选地，图像获取模块包括摄像头，用于获取用户的人脸图 像；判断子模块，用于验证人脸图像是否为有效的人脸图像；控制 子模块，用于在判断子模块验证结果为否的情况下，根据人脸的所 在位置及运动状态调整摄像头位置后，控制摄像头再次获取用户的 人脸图像直至其为有效的人脸图像。6优选地，表情语音查询^^莫块还用于将查找到的语音组合为语句。 优选地，表情语音数据库存储在本地或者存储在远程服务器上。 优选地，在表情语音数据库存储在远程服务器上的情况下，表情语音查询^t块还用于将用户的表情信息传输至远程服务器进行 与表情语音数据库的匹配，接收查找到的语音后将语音传输至语音 模块进行播放。为了实现上述目的，根据本专利技术的另一个方面，提供了一种通 话方法。根据本专利技术的通话方法包括获取用户的人脸图像，并从人脸 图像中提取用户的表情信息；通过将表情信息与表情语音数据库进 行匹配，查找到对应的语音并播放，其中，表情语音数据库用于存 储表情与语音的对应关系。优选地，获取用户的人脸图像之后，上述方法还包括从人脸 图像中提取人脸特征信息，在人脸特征信息与用户特征信息库不匹 配的情况下，确定用户是首次通话，其中，用户特4正信息库存卞者有 使用过移动设备的用户的人脸特征信息；在确定用户是首次通话的 情况下，通过对用户的表情进行釆集，将用户的专用的表情与语音 的对应关系加入表情语音数据库。优选地，提取用户的表情信息包括使用自动跟踪器对预定脸 部特征进行跟踪，提取表情的运动特征，并识别表情信息。通过本专利技术，釆用对用户的人脸图像进行获取并提取出表情信 息，根据表情信息查找对应的语音并播放该语音的方法，解决了相 关技术中未提供无法用语言表达情感的人群所能够使用的移动设备的问题，使具有语言障碍的人能够实现与正常人进行简单的会话交流，本专利技术使交流变得更方便、快捷。附图j兑明此处所说明的附图用来提供对本专利技术的进一步理解，构成本申请的一部分，本专利技术的示意性实施例及其说明用于解释本专利技术，并不构成对本专利技术的不当限定。在附图中附图说明图1是根据本专利技术实施例的移动设备的结构框图2是根据本专利技术实施例的图像获取模块的详细结构框图3是根据本专利技术实例1的移动设备的组成结构框图4是根据本专利技术实例1的人脸跟踪识别模块的结构框图5是根据本专利技术实施例的通话方法的流程图6是根据本专利技术实例1的图像获取模块的工作流程图7是根据本专利技术实例4的通话方法的详细流程图。具体实施方式功能相无述考虑到现有技术中存在的问题，本专利技术实施例提供了一种，该方案的处理原则为从人脸图像中提取人脸特征信息，在人脸特4正信息与用户特;f正信息库不匹配的情况下，确定用户是首次通话，其中，用户特征信息库存储有使用过移动设备的用户的人脸特征信息；在确定用户是首次通话的情况下，通过对用户的表情进行采集，将用户的专用的表情与语音的对应关系加入表情语音数据库。该方案能够^吏具有语言障碍的人能够实现与正常人进行简单的会话交流，本专利技术使交流变得更方便、快捷。下文中将参考附图并结合实施例来详细说明本专利技术。需要说明的是，在不冲突的情况下，本申请中的实施例及实施例中的特征可以坤目互纟且合。装置实施例根据本专利技术实施例，提供了一种移动设备，图l是根据本专利技术实施例的移动设备的结构框图，如图l所示，该移动设备包括图像获取模块12，用于获取用户的人脸图像。表情获取模块14,连接于图像获取模块12，用于从图像获取模块12获取的人脸图像中提取用户的表情信息。表情获取模块14还可以用于从人脸图像中提取人脸特征信息，在人脸特征信息与用户特征信息库不匹配的情况下，确定用户是首次通话，其中，用户特征信息库存储有使用过移动设备的用户的人脸特征信息，并且，在表情获取模块14确定用户是首次通话的情况下，通过对用户的表情进行采集，将用户的专用的表情与语音的对应关系加入表情语音数据库。优选地，表情获取才莫块14还可以用于^f吏用自动跟踪器对用户的预定脸部特征进行跟踪，提取表情的运动特征，并识别表情信息。表情语音查询模块16,连接于表情获取模块14，用于通过将表情信息与表情语音数据库进行匹配，以查找到对应的语音，其中，表情语音数据库用于存储表情与语音的对应关系，其可以存储在本地，也可以存4诸在远#呈月1务器上，在表情语音凄t据库存4诸在远程月良务器上的情况下，表情语音查询模块16还用于将用户的表情信息传输至远程服务器进行与表情语音数据库的匹配，接收查找到的语音后将语音传输至语音纟莫块18进行播放。优选地，表情语音查询^^莫块还可以用于将查找到的语音组合为语句。语音模块18,连接于表情语音查询^t块16,用于播放表情语音查询模块查找到的语音。图2是根据本专利技术实施例的图像获取模块的详细结构框图，如图2所示，图像获取模块12包括摄像头22，用于获取用户的人脸图像；判断子模块24，连接于摄像头22,用于验证人脸图像是否为有效的人脸图像；控制子模块26，连接于摄像头22和判断子模块24,用于在判断子模块24验证结果为否的情况下，根据人脸的所在本文档来自技高网...

【技术保护点】
一种移动设备，其特征在于，包括：图像获取模块，用于获取用户的人脸图像；表情获取模块，用于从所述图像获取模块获取的所述人脸图像中提取所述用户的表情信息；表情语音查询模块，用于通过将所述表情信息与表情语音数据库进行匹配，以查找到对应的语音，其中，所述表情语音数据库用于存储表情与语音的对应关系；语音模块，用于播放所述表情语音查询模块查找到的语音。

【技术特征摘要】
1.一种移动设备，其特征在于，包括图像获取模块，用于获取用户的人脸图像；表情获取模块，用于从所述图像获取模块获取的所述人脸图像中提取所述用户的表情信息；表情语音查询模块，用于通过将所述表情信息与表情语音数据库进行匹配，以查找到对应的语音，其中，所述表情语音数据库用于存储表情与语音的对应关系；语音模块，用于播放所述表情语音查询模块查找到的语音。2. 才艮据片又利要求1所述的移动i殳备，其特征在于，所述表情获取模块还用于从所述人脸图像中提取人脸特 征信息，在所述人脸特征信息与用户特征信息库不匹配的情况 下，确定所述用户是首次通话，其中，所述用户特征信息库存 储有使用过所述移动设备的用户的人脸特征信息；所述表情获取模块还用于在所述表情获取模块确定所述 用户是首次通话的情况下，通过对所述用户的表情进行采集， 将所述用户的专用的表情与语音的对应关系加入所述表情语 音数据库。3. 根据权利要求1所述的移动设备，其特征在于，所述表情获取 模块还用于使用自动跟踪器对所述用户的预定脸部特征进行 跟踪，提取表情的运动特征，并识别所述表情信息。4. 根据权利要求1所述的移动设备，其特征在于，所述图像获取 模块包括摄像头，用于获取所述用户的人脸图像；判断子模块，用于验证所述人脸图像是否为有效的人脸图像；控制子模块，用于在所述判断子模块验证结果为否的情况 下，根据人脸的所在位置及运动状态调整所述摄像头位置后， 控制所述摄像头再次获取所述用户的人脸图像直至其为有效 的人脸图像。5. 根据权利要求1至...

【专利技术属性】
技术研发人员：刘冬梅，
申请(专利权)人：中兴通讯股份有限公司，
类型：发明
国别省市：94[中国|深圳]