基于手势识别的辅助语义识别系统技术方案

本发明专利技术涉及人机交互技术领域，具体公开了基于手势识别的辅助语义识别系统，包括输入模块和图像采集模块；输入模块用于采集语音信息并将语音信息转换为第一文字文本；还包括：图像处理模块、姿势识别模块和语义识别模块，语义识别模块用于判断第一文字文本的内容与第二文字文本的内容是否一致，如果一致，语义识别模块还用于从第一文字文本并提取咨询关键词，语义识别模块还用于将咨询关键词与法律词库中的法律关键词进匹配，并获取匹配成功的法律关键词对应的法律条文；语义识别模块还用于将法律条文输出。采用本发明专利技术的技术方案能够准确识别输入的语句是否出现错误。

Auxiliary semantic recognition system based on gesture recognition

【技术实现步骤摘要】
基于手势识别的辅助语义识别系统
本专利技术涉及人机交互
，特别涉及基于手势识别的辅助语义识别系统。
技术介绍
由于法律具有较高的专业性，非专业人才很难掌握和灵活运用。因此，人们在遇到法律问题时往往需要求助律师进行相关法律问题的咨询。然而，因为律师的从业人数相对较少，咨询费用相对较贵，律师的咨询服务并不能够满足所有人的咨询要求。为了解决普通大众的法律咨询问题，能提供自助服务的法律咨询机器人应运而生。人们通过法律咨询机器人进行法律问题咨询时，需要被咨询者输入咨询问题，系统可以根据咨询问题自动匹配对应的解答发送给咨询者。目前咨询者输入咨询问题的方式主要为键盘输入。但是对于部分人群来说，还是存在着不会使用键盘输入或者使用键盘输入不熟练导致效率低的问题。为了让所有人都能顺利的进行咨询，需要引入额外的输入方式，例如语音输入。但是与键盘输入相比，语音输入比较直接，想法不需要进行二次转换就能直接表述出来，导致思考的时间比较少，容易出现叙述错误的情况。为了提高语音输入的准确性，需要一种辅助语义识别的系统。专利本文档来自技高网...

【技术保护点】
1.基于手势识别的辅助语义识别系统，包括输入模块和图像采集模块；图像采集模块用于采集图像数据；输入模块用于采集语音信息并将语音信息转换为第一文字文本；其特征在于，还包括：/n图像处理模块，用于获取图像数据并划分姿势识别区；/n姿势识别模块，用于识别姿势识别区的手势并记录手势的运动轨迹信息；姿势识别模块还用于将手势及手势的运动轨迹信息输入预设的手势识别模型中并获取识别结果；识别结果为第二文字文本；/n语义识别模块，用于获取第一文字文本和第二文字文本，将第一文字文本的内容与第二文字文本的内容进行对比，判断第一文字文本的内容与第二文字文本的内容是否一致，如果一致，语义识别模块还用于从第一文字文本并提...

【技术特征摘要】
1.基于手势识别的辅助语义识别系统，包括输入模块和图像采集模块；图像采集模块用于采集图像数据；输入模块用于采集语音信息并将语音信息转换为第一文字文本；其特征在于，还包括：
图像处理模块，用于获取图像数据并划分姿势识别区；
姿势识别模块，用于识别姿势识别区的手势并记录手势的运动轨迹信息；姿势识别模块还用于将手势及手势的运动轨迹信息输入预设的手势识别模型中并获取识别结果；识别结果为第二文字文本；
语义识别模块，用于获取第一文字文本和第二文字文本，将第一文字文本的内容与第二文字文本的内容进行对比，判断第一文字文本的内容与第二文字文本的内容是否一致，如果一致，语义识别模块还用于从第一文字文本并提取咨询关键词，语义识别模块还预存有法律词库，法律词库包括若干法律关键词，以及与法律关键词对应的法律条文；语义识别模块还用于将咨询关键词与法律词库中的法律关键词进匹配，并获取匹配成功的法律关键词对应的法律条文；语义识别模块还用于将法律条文输出。


2.根据权利要求1所述的基于手势识别的辅助语义识别系统，其特征在于：所述语义识别模块在未获取到第一文字文本时，还用于从第二文字文本中提取咨询关键词。


3.根据权利要求2所述的基于手势识别的辅助语义识别系统，其特征在于：所述图像处理模块划分姿势识别区时，还用于识别人体颈部、头顶部和腰部；图像处理模块还用于将颈部左右分别延伸65-70cm作为横向边界；图像处理模块还用于将头顶部和腰部作为纵向边界。


4.根据权利要求3所述的基于手势识别的辅助语义识别系统，其特征在于：所述运动轨迹信息包括运动方向、运动速度和运动轨迹坐标。

...

【专利技术属性】
技术研发人员：吴怡，
申请(专利权)人：重庆百事得大牛机器人有限公司，
类型：发明
国别省市：重庆;50