System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 一种基于手势识别的智能电力交互系统及方法技术方案_技高网

一种基于手势识别的智能电力交互系统及方法技术方案

技术编号:40416640 阅读:7 留言:0更新日期:2024-02-20 22:34
本发明专利技术公开一种基于手势识别的智能电力交互系统,系统包括传感器检测模块,利用传感器采集基于标准区域的偏移程度以及速度变化情况,判断标准区域是否均在识别范围内;视频采集模块,采集并截取含有手势信息的视频数据,并提取手势的逐帧特征信息;手势关联模块,将手势的逐帧特征信息的输入到手势关联网络模型中,输出最接近的标准手势以及标准手势的逐帧特征信息;电力设备及场景关联模块,根据标准手势以及标准手势的逐帧特征信息将手势划分为第一手势和第二手势,并分别按电力设备及场景进行执行控制。还包括相应的方法,本发明专利技术能够实现人与智能电力设备之间的自然交互,从而提升操作效率、降低人为错误,并为电力培训和维护提供解决方案。

【技术实现步骤摘要】

本专利技术涉及电力交互,具体涉及一种基于手势识别的智能电力交互系统及方法


技术介绍

1、随着电力系统的规模不断扩大,电网结构的复杂性逐渐增加,智能电力设备的维护、操作和监控变得越发重要;通常一些智能电力设备的维护、操作和监控需要人工接触来进行执行和控制,这无疑会造成极大的安全隐患和风险;此外,人工接触往往工作效率低下,不利于智能电力设备的长期维护。


技术实现思路

1、本专利技术解决了目前智能电力设备的维护、操作和监控采用人工接触来进行执行和控制造成极大的安全隐患和风险的问题,提出一种基于手势识别的智能电力交互系统及方法,本专利技术能够实现人与智能电力设备之间的自然交互,从而提升操作效率、降低人为错误,并为电力培训和维护提供解决方案。

2、为了实现上述目的,本专利技术采用以下技术方案:一种基于手势识别的智能电力交互系统,包括

3、传感器检测模块,初始识别并标记手势的若干个标准区域,利用传感器采集基于标准区域的偏移程度以及速度变化情况,判断标准区域是否均在识别范围内;

4、视频采集模块,若标准区域均在识别范围内时,采集并截取含有手势信息的视频数据,并提取手势的逐帧特征信息;

5、手势关联模块,将手势的逐帧特征信息的输入到手势关联网络模型中,输出最接近的标准手势以及标准手势的逐帧特征信息;

6、电力设备及场景关联模块,根据标准手势以及标准手势的逐帧特征信息将手势划分为第一手势和第二手势,第一手势利用当前电力设备以及场景进行执行控制,第二手势调取符合要求的电力设备以及场景进行执行控制。

7、本技术方案中,传感器检测模块能够利用传感器对手势进行初步的采集以及情况分析,即确定该手势是否能够被本专利技术的智能电力交互系统所识别,主要基于手势的偏移程度以及速度变化情况,若均符合标准则手势能够被识别;视频采集模块能够获取基于手势信息的完全视频数据,并且能够对含有手势信息的视频信息进行逐帧分析,得到相应的逐帧特征信息;在手势关联模块中,设置有手势关联网络模型,输出最接近的标准手势,标准手势的偏差均在一定范围内;在电力设备及场景关联模块中,将标准手势划分为第一手势和第二手势,两种手势分别对应不同的方式进行执行控制;本专利技术的系统能够基于手势来执行控制相应电力设备以及应用场景,从而实现人机之间的自然交互,操作便捷且安全性高。

8、本专利技术还进一步设置为:所述传感器检测模块包括

9、标记单元,红外识别初始手势,标记若干个标准区域,并对标准区域进行编号;

10、检测单元,检测得到基于标准区域的速度信息、位移以及角度偏移信息;

11、判断单元,根据速度信息、位移以及角度偏移信息,判断所有的标准区域的计算值是否均大于预设识别阈值,若是,则判断为可识别手势。

12、本技术方案中,标记单元通过其内的红外识别能够来确定若干个标准区域,标准区域的小于均相同,标记标准区域后,为了便于数据整理和后续的判断对标准区域进行编号;在编号完成之后,利用检测单元获取得到速度信息(包括加速度信息)以及位移角度偏移信息;最后在判断单元进行手势是否为可识别的判断,在所有的标准区域均达标后,该手势为可识别,当其中一个或者多个标准区域未达标时,则该手势直接为不可识别,即也无法进行后续的操作。

13、本专利技术还进一步设置为:所述视频采集模块包括

14、指令单元,与传感器检测模块连接,在标准区域均在识别范围内时,触发开启指令;

15、视频处理单元,采集视频数据,并截取含有手势信息的视频数据;

16、分析单元,分析含有手势信息的视频数据,提取手势的逐帧特征信息,并记录关键参数的变化时间。

17、本技术方案中,指令单元与视频处理单元连接,视频处理单元与分析单元连接,指令单元能够发出开启指令,触发开启采集视频数据;视频处理单元能够完成视频的采集以及相应包含手势信息的视频数据;分析单元能够提取出手势的逐帧特征信息,并对特征信息中关键参数的变化时间进行记录,本专利技术的关键参数指的是相关时间内幅度变化较大的参数。

18、本专利技术还进一步设置为:所述手势关联模块包括

19、预处理单元,对手势的逐帧特征信息按时间顺序进行整理,并剔除无关信息;

20、比对单元,与预处理单元连接,内置有手势关联网络模型,该模型以手势的逐帧特征信息以及标准手势的逐帧特征信息作为训练样本。

21、本技术方案中,在手势关联模块中,预处理单元与比对单元连接,在完成预处理的步骤后,在比对单元进行关于逐帧特征信息的比对,比对具体进行比对单元之中的手势关联网络模型之中进行,该模型具有深度学习功能,在输入手势的逐帧特征信息后,模型首先根据逐帧特征信息来遍历整个模型数据库中的标准手势,在找到相应的若干个标准手势之后,再根据逐帧特征信息的各项指标偏差来确定最接近的标准手势。

22、本专利技术还进一步设置为:所述最接近的标准手势包括有唯一标准手势以及不唯一标准手势,所述唯一标准手势所对应的模型输入的手势的逐帧特征信息的各项指标与唯一标准手势的各项指标偏差均在设定范围内,所述不唯一手势所对应的模型输入的手势的逐帧特征信息的部分指标与不唯一手势不在设定范围内。

23、本技术方案中,对于最接近的标准手势,主要分为唯一标准手势以及不唯一标准手势,唯一标准手势与输入的手势的逐帧特征信息的各项指标的偏差均在设定范围之内,该种手势在后续的电力设备及场景关联时,无需验证或者选择核验;而不唯一标准手势即对应有至少一个结果,多个结果的原因是不唯一手势所对应的模型输入的手势的逐帧特征信息的部分指标与不唯一手势不在设定范围内,即只有部分指标在设定范围之内,该种手势在后续的电力设备及场景关联时,需要用户进行选择或者进行再次的验证。

24、本专利技术还进一步设置为:所述电力设备及场景关联模块包括

25、手势划分单元,根据标准手势的逐帧特征信息中是否出现加速度大于紧急阈值,将手势划分为第一手势和第二手势;

26、验证单元,对第一手势和第二手势中属于不唯一标准手势均进行验证,确定唯一的结果;执行单元,对于第一手势,其加速度小于或者等于紧急阈值,第一手势利用当前电力设备以及场景进行执行控制,对于第二手势,其加速度大于紧急阈值,第二手势调取符合要求的电力设备以及场景进行执行控制。

27、本技术方案中,手势划分单元与验证单元连接,验证单元与执行单元连接,手势划分单元根据加速度来划分第一手势和第二手势,第一手势为加速度小的情况,第二手势为加速度大的情况,验证单元能够对属于不唯一标准手势的分类进行验证,验证也可以采用用户二次选择的方式;执行单元执行控制,对于第一手势,仅可在当前的电力设备以及场景下进行控制,即在当前的控制界面进行执行控制,而对于第二手势,可根据需求进行控制界面的调取,调取出符合要求的电力设备以及场景来进行控制。

28、本专利技术还进一步设置为:所述标准区域的计算值表达式为:...

【技术保护点】

1.一种基于手势识别的智能电力交互系统,其特征在于,包括

2.根据权利要求1所述的一种基于手势识别的智能电力交互系统,其特征在于,所述传感器检测模块包括

3.根据权利要求1或2所述的一种基于手势识别的智能电力交互系统,其特征在于,所述视频采集模块包括

4.根据权利要求3所述的一种基于手势识别的智能电力交互系统,其特征在于,所述手势关联模块包括

5.根据权利要求4所述的一种基于手势识别的智能电力交互系统,其特征在于,所述最接近的标准手势包括有唯一标准手势以及不唯一标准手势,所述唯一标准手势所对应的模型输入的手势的逐帧特征信息的各项指标与唯一标准手势的各项指标偏差均在设定范围内,所述不唯一手势所对应的模型输入的手势的逐帧特征信息的部分指标与不唯一手势不在设定范围内。

6.根据权利要求5所述的一种基于手势识别的智能电力交互系统,其特征在于,所述电力设备及场景关联模块包括

7.根据权利要求2或4或6所述的一种基于手势识别的智能电力交互系统,其特征在于,所述标准区域的计算值表达式为:

8.一种基于手势识别的智能电力交互方法,适用权利要求1-7任一项所述的一种基于手势识别的智能电力交互系统,其特征在于,包括以下步骤:

9.根据权利要求8所述的一种基于手势识别的智能电力交互方法,其特征在于,所述步骤S2包括以下步骤:

10.根据权利要求8或9所述的一种基于手势识别的智能电力交互方法,其特征在于,所述步骤S4包括以下步骤:

...

【技术特征摘要】

1.一种基于手势识别的智能电力交互系统,其特征在于,包括

2.根据权利要求1所述的一种基于手势识别的智能电力交互系统,其特征在于,所述传感器检测模块包括

3.根据权利要求1或2所述的一种基于手势识别的智能电力交互系统,其特征在于,所述视频采集模块包括

4.根据权利要求3所述的一种基于手势识别的智能电力交互系统,其特征在于,所述手势关联模块包括

5.根据权利要求4所述的一种基于手势识别的智能电力交互系统,其特征在于,所述最接近的标准手势包括有唯一标准手势以及不唯一标准手势,所述唯一标准手势所对应的模型输入的手势的逐帧特征信息的各项指标与唯一标准手势的各项指标偏差均在设定范围内,所述不唯一手势所对应的模型输入的手势的...

【专利技术属性】
技术研发人员:朱凯元许路广叶润潮周刚张思远李锐锋周冰王聃卢思瑶魏泽民徐东辉汤晓石周一飞易妍王佳培赵康丽王舒清王洪一
申请(专利权)人:国网浙江省电力有限公司嘉兴供电公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1