智能电网业务受理机器人制造技术

本发明专利技术公开了一种智能电网业务受理机器人，机器人业务系统基于J2EE分布式体系架构，B/S模式。业务资料图像采集处理模块通过视觉识別技术识別客户资料并上传至营销应用网络存档备份，建立客户档案库并联网管理；表单图像识别检测模块对输入的图像进行处理，检测图像中存在的表单，并标示出表单出现的位置及区域；检测模块基于Harr特征及Adaboost检测算法实现，实现对表单的强检测。本发明专利技术的智能电网业务受理机器人，它是为电力营业厅量身打造的业务受理服务机器人，具有自助服务的标准化、低成本、便利性的特点，使其成为分流、承担基础服务的最佳选择。

Smart grid business acceptance robot

The invention discloses a smart grid service acceptance robot, wherein, the robot service system is based on the J2EE distributed system architecture and the B/S mode. Business information, image acquisition and processing module through the recognition of visual recognition of customer data and uploaded to the marketing application of network backup, establish customer archives and network management; image form, image identification and detection module of input processing, detection in image form, and mark the location and area of the form; Harr feature detection module and Adaboost detection algorithm based on strong detection of the form. The invention of the smart grid business accepts the robot, it is for the electric power business hall tailored service service robot, with self service standard, low cost and convenience features, make it become the best choice for diversion, basic services.

【技术实现步骤摘要】
智能电网业务受理机器人
本专利技术涉及电能电网领域，具体而言，尤其是涉及智能电网供电营业厅中的智能机器人。
技术介绍
现有营业厅正面临着日益增大、新业务推广和VIP客户差异化服务需求的压力和挑战。大量流程化、标准化、低附加值的基础服务如缴费、基本业务办理、信息查询等占用了绝大多数营业资源，严重限制了各种新业务推广能力。
技术实现思路
针对现有技术中存在的问题，本专利技术的目的是设计一种业务受理机器人，它是为电力营业厅量身打造的业务受理服务机器人。自助服务的标准化、低成本、便利性的特点，使其成为分流、承担基础服务的最佳选择。为了实现上述专利技术目的，本专利技术采用的技术方案为：一种智能电网业务受理机器人，具有触摸屏的操作平台，其特征在于：它包括业务资料图像采集处理模块、表单图像识别检测模块、语音交互识别模块、模板库、营销应用网络和机器人业务系统，所述机器人业务系统基于J2EE分布式体系架构，B/S模式。所述业务资料图像采集处理模块是通过视觉识別技术识別客户资料并上传至营销应用网络存档备份，建立客户档案库并联网管理；表单识别时，机器人业务系统需要：①检测摄像头采集到的图像，并与模板库对比，确认表单类表。②识别关键区域客户填写信息。所述表单图像识别检测模块，图像检测通过分析纸质表单上面的局部特征实现，要求被识别表单具有一定的纹理图案，以便在图像处理中能够提取到足够的局部特征；图像检测时，目标表单具有一定的纹理图案，在目标图像中提取局部特征点，并且这些特征点在视角变化的情况下仍然能被提取到；对提取到的特征点计算描述向量，该描述向量在视角变化的情况下具有一定的不变性；表单的检测通过对特征点的匹配实现。所述表单图像识别检测模块对输入的图像进行处理，检测图像中存在的表单，并标示出表单出现的位置及区域；检测模块基于Harr特征及Adaboost检测算法实现，该算法是对大量的表单样本与不含表单的样本进行处理，提取Harr特征，并训练以单个Harr特征为输入的弱分类器，最后利用Adaboost算法将弱分类器进行组合，实现对表单的强检测。机器人业务系统通过所述表单图像识别检测模块从输入图像中找到表单图像区域，对于检测到的表单和模板库中的表单进行预处理，先通过几处特定特征模版，通过模版匹配方法寻找图像中的特定特征位置，在找到特定特征位置后，按照特定特征距离计算对表单图像进行规整；规整后通过提取尺度不变特征变换SIFI的特征点并计算特征点的描述向量，一方面构成识别模版库，另一方面将待识别表单图像和模板库进行特征点匹配，实现表单的识别。所述语音交互识别模块，通过对语音信号进行预处理和分析计算可抽取出所需的语音特征，并以此建立语音识别所需的模板库；当对语音进行识别时，则将系统中存放的语音模板与输入的语音信号的特征进行比较，并根据一定的算法和策略，找出一系列最优的与输入的语音匹配的模板，最后输出识别结果。有益效果：本专利技术具有自助服务的标准化、低成本、便利性的特点，智能电网业务受理机器人使其成为分流、承担基础服务的最佳选择。附图说明图1，本专利技术实施例的业务受理流程图。图2，本专利技术实施例的机器人业务系统网络接入图。图3，本专利技术实施例的图像检测流程图。图4，本专利技术实施例的表单图像识别流程图。图5，本专利技术实施例的语音识别的训练图。图6，本专利技术实施例的语音识别的处理流程图。具体实施方式以下结合附图和具体实施例对本专利技术作进一步详细说明。本实施例的智能电网业务受理机器人为电力营业厅量身打造的业务受理服务机器人。以机器人胸口的触摸屏为操作平台，使用了图像、语音、视频等各种多媒体手段相结合的方式，提供了电量电费查询、广告播放、业务办理，电力法规宣传，用电常识，二代身份证识别，现金缴费、电费发票自助打印，形成一套完整电力自助服务的解决方案。业务系统模块如表5-1所示。基于电力营业厅应用环境的业务受理机器人设计业务受理流程如图1所示，本实施例的业务受理流程图。机器人上整个业务系统基于J2EE分布式体系架构，B/S模式，J2EE的本质及核心就是为了达到平台无关性的要求，本系统能运行在Windows、Unix、Linux等操作系统上，使得系统的延伸能力得到强有力的保证；同时摒弃了传统的C/S系统方案，采用B/S模式，开发、维护等几乎所有工作也都集中在服务器端，当企业对网络应用进行升级时，只需更新服务器端的软件就可以，这减轻了异地用户系统维护与升级的成本。机器人业务系统网络接入如图2所示。业务资料图像采集处理模块。在机器人业务系统的“业务办理”功能模块中，许多业务需要客户提供必要的表单资料，机器人需要通过视觉技术识別客户资料并上传至营销应用网络存档备份，建立客户档案库并联网管理。表单识别时，机器人需要完成以下两个工作：(1)检测摄像头采集到的图像，并与模板库对比，确认表单类表。(2)识别关键区域客户填写信息。机器视觉是智能业务受理机器人环境感知与业务受理的一个部分。作为业务机器人，为了完成一些具体的表单录入业务，机器人必须要能够识别环境中特定的业务表单。机器视觉的主要任务就是采用图像处理的手段来实现上述需求。总体而言，机器视觉部分的主要功能可以划分为两个部分，即表单图像识别检测及字符识别。机器视觉部分的传感器为分别配置在机器人腰部及头顶部位的两台摄像机，采用高清摄像头进行图像采集。表单图像识别检测模块。表单图像识别检测模块通过分析纸质表单上面的局部特征实现，这要求被识别表单具有一定的纹理图案，以便在图像处理中能够提取到足够的局部特征。检测方法的主要思路为：目标表单具有一定的纹理图案，于是可以在目标图像中提取局部特征点，并且这些特征点在视角变化的情况下仍然能被提取到；对提取到的特征点计算描述向量，该描述向量在视角变化的情况下具有一定的不变性；于是表单的检测可以通过对特征点的匹配实现。整个检测的流程如图3所示，本实施例的图像检测流程图。表单图像识别检测模块对输入的图像进行处理，检测图像中存在的表单，并标示出表单出现的位置及区域。检测模块基于Harr特征及Adaboost检测算法实现，该算法的思路是对大量的表单样本与不含表单的样本进行处理，提取Harr特征，并训练以单个Harr特征为输入的弱分类器，最后利用Adaboost算法将弱分类器进行组合，实现对表单的强检测。表单识别的具体流程如图4所示。由于设计了表单图像识别检测模块，系统可以从输入图像中找到表单图像区域。对于检测到的表单和模板库中的表单都进行了预处理，先通过几处特定特征模版，通过模版匹配方法寻找图像中的特定特征位置(如企业LOGO等)，在找到特定特征位置后，按照特定特征距离计算对表单图像进行规整。规整后通过提取SIFI(ScaleInvariantFeatureTransform，尺度不变特征变换)特征点并计算特征点的描述向量，一方面构成识别模版库，另一方面将待识别表单图像和模板库进行特征点匹配，实现表单的识别。本识别算法的特点在于识别速率较高，其原因有两个方面；一是图像为单样本库，在相同识别目标数的情况下，需要匹配的特征点数要少；二是进行了图像检测，仅对表单区域内的特征进行匹配，可以在光照变化，复杂背景下实现了对表单图像的识别。机器人将客户提供表单检测认定后，下一步就需要把客户填写的相关信息通过图像处理提交给业本文档来自技高网...

【技术保护点】
一种智能电网业务受理机器人，具有触摸屏的操作平台，其特征在于：它包括业务资料图像采集处理模块、表单图像识别检测模块、语音交互识别模块、模板库、营销应用网络和机器人业务系统，所述机器人业务系统基于J2EE分布式体系架构，B/S模式。

【技术特征摘要】
1.一种智能电网业务受理机器人，具有触摸屏的操作平台，其特征在于：它包括业务资料图像采集处理模块、表单图像识别检测模块、语音交互识别模块、模板库、营销应用网络和机器人业务系统，所述机器人业务系统基于J2EE分布式体系架构，B/S模式。2.根据权利要求1所述的智能电网业务受理机器人，其特征在于：所述业务资料图像采集处理模块是通过视觉识別技术识別客户资料并上传至营销应用网络存档备份，建立客户档案库并联网管理；表单识别时，机器人业务系统需要：①检测摄像头采集到的图像，并与模板库对比，确认表单类表。②识别关键区域客户填写信息。3.根据权利要求2所述的智能电网业务受理机器人，其特征在于：所述视觉识别，即表单图像识别检测及字符识别，传感器为分别配置在机器人腰部及头顶部位的两台摄像机，采用高清摄像头进行图像采集。4.根据权利要求1所述的智能电网业务受理机器人，其特征在于：所述表单图像识别检测模块，图像检测通过分析纸质表单上面的局部特征实现，要求被识别表单具有一定的纹理图案，以便在图像处理中能够提取到足够的局部特征；图像检测时，目标表单具有一定的纹理图案，在目标图像中提取局部特征点，并且这些特征点在视角变化的情况下仍然能被提取到；对提取到的特征点计算描述向量，该描述向量在视角变化的情况下具有一定的不变性；表单的检测通过对特征点的匹配实现。5.根据权利要求4所述的智能电网业务受理机器人，其特征在于：所述表单图像识别检测模块对输入的图像进行处理，检测图像中存...

【专利技术属性】
技术研发人员：邾明明，任亮，徐文华，
申请(专利权)人：南京华设科技股份有限公司，
类型：发明
国别省市：江苏,32