基于监控视频信息的供电营业厅服务人员行为识别方法技术

本发明专利技术公开了一种基于监控视频信息的供电营业厅服务人员行为识别方法、装置、介质及设备，属于行为识别技术领域，用于解决目前服务人员难于监管的技术问题，方法包括：对视频帧进行预处理，提取视频帧的图像特征参数，送入循环神经网络中，得到图像特征参数与高维向量的映射；对语音信号进行预处理，提取语音特征参数，送入循环神经网络中，得到语音特征参数与高维向量的映射；在得到视频帧以及语音信号的高维向量的基础上，构建最终的分类器模型，建立从高维向量到最终不规范行为类别的映射；获取监测视频信息，基于分类器模型，对供电营业厅服务人员的行为进行识别。本发明专利技术具有操作简便、识别精度高、提高工作效率和服务水平等优点。

【技术实现步骤摘要】
基于监控视频信息的供电营业厅服务人员行为识别方法
本专利技术主要涉及行为分析
，特指一种基于监测视频信息的供电营业厅服务人员行为识别方法、装置、介质及设备。
技术介绍
供电营业厅是供电企业最重要的服务窗口，具有沟通、展示和传播企业形象的重要社会功能。供电营业厅是供电企业的窗口前沿，代表了供电企业的形象。客户到供电营业厅办理各项用电业务，首先接触到的就是供电营业厅的服务人员。因此，供电营业厅工作人员的服务技巧、待人接物的态度，往往决定了客户对供电企业服务水平的认知程度。一些工作人员的散漫、懈怠行为，如工作时间玩手机、睡觉、态度恶劣等都会给客户留下极其不好的印象。加之如今是个信息化的时代，微博等自媒体使用广泛，若被不满的客户发布信息至网上，容易造成企业的形象以及大量经济损失。目前供电营业厅服务具有完善的规范制度，但往往存在执行不到位，难于监管的情况，如果仅仅依赖主管部门的现场稽查，很难起到很好的监督和管控作用。开展对营业厅行为规范智能识别、分析与预警研究，探索建立示范工程显得十分必要。
技术实现思路
本专利技术要解决的技术本文档来自技高网...

【技术保护点】
1.一种基于监控视频信息的供电营业厅服务人员行为识别方法，其特征在于，包括：/n对视频帧进行预处理，提取预处理后的视频帧中的图像特征参数，送入循环神经网络中，得到图像特征参数与高维向量的映射；/n对语音信号进行预处理，提取预处理后的语音信号中的语音特征参数，送入循环神经网络中，得到语音特征参数与高维向量的映射；/n在得到视频帧以及语音信号的高维向量的基础上，构建最终的分类器模型，建立从高维向量到最终不规范行为类别的映射；/n获取监测视频信息，基于分类器模型，对供电营业厅服务人员的行为进行识别。/n

【技术特征摘要】
1.一种基于监控视频信息的供电营业厅服务人员行为识别方法，其特征在于，包括：
对视频帧进行预处理，提取预处理后的视频帧中的图像特征参数，送入循环神经网络中，得到图像特征参数与高维向量的映射；
对语音信号进行预处理，提取预处理后的语音信号中的语音特征参数，送入循环神经网络中，得到语音特征参数与高维向量的映射；
在得到视频帧以及语音信号的高维向量的基础上，构建最终的分类器模型，建立从高维向量到最终不规范行为类别的映射；
获取监测视频信息，基于分类器模型，对供电营业厅服务人员的行为进行识别。


2.根据权利要求1所述的基于监控视频信息的供电营业厅服务人员行为识别方法，其特征在于，对视频帧进行预处理包括：采用背景提取算法将工作人员的区域分割出来，并使用投票算法，计算连通域定位目标区域，对目标进行捕捉或跟踪，最终得到只含有单一目标的图像。


3.根据权利要求2所述的基于监控视频信息的供电营业厅服务人员行为识别方法，其特征在于，将视频流中相邻两帧或相隔几帧图像的两幅图像像素值相减，并对相减后的图像进行阈值化来提取图像中的运动区域；
或者将当前获取的图像帧与背景图像做差分运算，得到目标运动区域的灰度图，对灰度图进行阈值化提取运动区域，其中背景图像根据当前获取图像帧进行更新。


4.根据权利要求1或2或3所述的基于监控视频信息的供电营业厅服务人员行为识别方法，其特征在于，对于不规范行为的识别需标定其具体的开始帧以及结束帧：提取视频帧的特征序列，再用滑窗机制在视频中的每个位置生成多个不同尺寸的提名，之后再对每个提名训练一个动作分类器和一个排名来对提名进行分类和排序，并且采用CDC算法来对时序动作检测中的动作边界进行微调以使得动作边界更加准确。


5.根据权利要求1或2或3所述的基于监控视频信息的供电营业厅服务人员行为识别方法，其特征在于，对语音信号进行预处理包括：使用数字滤波器实现预加重，采用短时分析算法对具有...

【专利技术属性】
技术研发人员：熊德智，陈向群，胡军华，刘小平，柳青，杨茂涛，黄瑞，温和，欧阳黎，陈浩，曾文伟，
申请(专利权)人：国网湖南省电力有限公司，国网湖南省电力有限公司供电服务中心计量中心，国家电网有限公司，
类型：发明
国别省市：湖南;43