基于语音识别的收银监督方法及系统技术方案

本发明专利技术提供了一种基于语音识别的收银监督方法及系统，该方法包括：采集收银操作过程中收银员与顾客的对话语音信息；根据声纹特征识别所述对话语音信息中所述收银员的语音；当所述收银员的语音中出现预设的特定词汇时，启动摄像设备采集所述收银操作的视频信息；根据所述视频信息判定所述收银操作是否违反操作规范。在本发明专利技术中，通过对收银操作对话中出现的特定词汇的语音识别，启动摄像头进行视频取证，并根据视频信息及进账情况，判定该收银操作是否有异常，从而提高了收银监管效率，保证了店铺资金的安全。

The method and system of cash register supervision based on speech recognition

【技术实现步骤摘要】
基于语音识别的收银监督方法及系统
本专利技术涉及语音识别领域，具体而言，涉及一种基于语音识别的收银监督方法及系统。
技术介绍
收银员将公司的货款收取回笼汇总，并将销售数据正确输入收银机，将正确销售信息提供给公司的专职人员，(即在什么时间销售了哪些商品，卖了多少，付款方式等)公司根据这些信息对商品的种类、数量、价格、付款方式等进行数据归纳和分析，是整个公司信息网络的重要组成部分。在线下门店中，有些收银员趁职务之便，借助收银的过程中饱私囊，私自套现。比如：不经公司财务系统打单，直接收取现金款或通过给人二维码进行收款，将货款收为己用；利用代金券、团购等与直接支付的差价，进行套现。现有技术方案，通常采用视频监控系统，全天候的拍摄收银员的在岗图像信息，并通过重播视频画面或专人实时查看监控画面，了解收银员的在岗工作情况。但是，现有的这种方式，重播视频画面或专人实时查看监控画面需要耗费较大的人力成本，且大量的视频画面需要较大的存储空间。其次，通过更换二维码、私自更改付款方式很难通过视频监控发现，监管效率不高。
技术实现思路
本专利技术实施例提供了一种基于语音识别的收银监督方法及系统，以至少解决相关技术中通过视频监控收银员的收银操作，导致监管效率不高的问题。根据本专利技术的一个实施例，提供了一种基于语音识别的收银监督方法，包括：采集收银操作过程中收银员与顾客的对话语音信息；根据声纹特征识别所述对话语音信息中所述收银员的语音；当所述收银员的语音中出现预设的特定词汇时，启动摄像设备采集所述收银操作的视频信息；根据所述视频信息判定所述收银操作是否违反操作规范。可选地，根据声纹特征识别所述对话语音信息中所述收银员的语音包括：提取所述对话语音信息中各说话人的声纹特征；将提取的所述声纹特征与预先构建的收银员的个体声纹模型相匹配，以识别出所述对话语音信息中所述收银员的语音。可选地，当所述收银员的语音中出现预设的特定词汇时，启动摄像设备采集所述收银操作的视频信息包括：当所述语音中出现预设的特定词汇时，启动所述摄像设备录制指定时长的收银操作视频信息，并记录所述特定词汇出现时间，其中，所述特定词汇至少包括以下之一：“扫我的码”、“现金”、“更换支付方式”。可选地，根据所述视频信息判定所述收银操作是否违反操作规范，包括以下至少之一：当出现“现金”特定词汇时，分析所述视频信息中收银员是否打开收银台，若没有打开，则判定该收银操作违反操作规范；当出现“扫我的码”特定词汇时，分析所述视频信息中是否出现收银员拿出手机的动作，如果有，则判定该收银操作违反操作规范；当出现“更换支付方式”特定词汇时，根据该特定词汇出现时间，确定在预设时间内指定账户中是否有资金进账，如果没有，则判定该该收银操作违反操作规范。根据本专利技术的另一个实施例，提供了一种基于语音识别的收银监督系统，包括：语音采集模块，用于采集收银操作过程中收银员与顾客的对话语音信息；声纹识别模块，用于根据声纹特征识别所述对话语音信息中所述收银员的语音；视频采集模块，用于在所述收银员的语音中出现预设的特定词汇的情况下，采集所述收银操作的视频信息；判定模块，用于根据所述视频信息判定所述收银操作是否违反操作规范。可选地，所述声纹识别模块包括：提取单元，用于提取所述对话语音信息中各说话人的声纹特征；匹配单元，用于将提取的所述声纹特征与预先构建的收银员的个体声纹模型相匹配，以识别出所述对话语音信息中所述收银员的语音。可选地，所述视频采集模块包括：视频采集单元，用于当所述语音中出现预设的特定词汇时，启动所述摄像设备录制指定时长的收银操作视频信息，并记录所述特定词汇出现时间，其中，所述特定词汇至少包括以下之一：“扫我的码”、“现金”、“更换支付方式”。可选地，所述判定模块包括以下至少之一：第一判定单元，用于在出现“现金”特定词汇的情况下，分析所述视频信息中收银员是否打开收银台，若没有打开，则判定该收银操作违反操作规范；第二判定单元，用于在出现“扫我的码”特定词汇的情况下，分析所述视频信息中是否出现收银员拿出手机的动作，如果有，则判定该收银操作违反操作规范；第三判定单元，用于在出现“更换支付方式”特定词汇的情况下，根据该特定词汇出现时间，确定在预设时间内指定账户中是否有资金进账，如果没有，则判定该该收银操作违反操作规范。根据本专利技术的又一个实施例，还提供了一种存储介质，所述存储介质中存储有计算机程序，其中，所述计算机程序被设置为运行时执行上述任一项方法实施例中的步骤。根据本专利技术的又一个实施例，还提供了一种电子装置，包括存储器和处理器，所述存储器中存储有计算机程序，所述处理器被设置为运行所述计算机程序以执行上述任一项方法实施例中的步骤。在本专利技术的上述实施例中，通过对收银操作对话中出现的特定词汇的语音识别，启动摄像头进行视频取证，并根据视频信息及进账情况，判定该收银操作是否有异常，从而提高了收银监管效率，保证了店铺资金的安全。附图说明此处所说明的附图用来提供对本专利技术的进一步理解，构成本申请的一部分，本专利技术的示意性实施例及其说明用于解释本专利技术，并不构成对本专利技术的不当限定。在附图中：图1是根据本专利技术实施例的基于语音识别的收银监督方法流程图；图2是根据本专利技术实施例的收银监督方法的流程图；图3是根据本专利技术实施例的基于语音识别的收银监督系统结构示意图；图4是根据本专利技术可选实施例的收银监督系统结构示意图。具体实施方式下文中将参考附图并结合实施例来详细说明本专利技术。需要说明的是，在不冲突的情况下，本申请中的实施例及实施例中的特征可以相互组合。需要说明的是，本专利技术的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。在本实施例中提供了一种基于语音识别的收银监督方法，图1是根据本专利技术实施例的方法流程图，如图1所示，该流程包括如下步骤：步骤S102，采集收银操作过程中收银员与顾客的对话语音信息；步骤S104，根据声纹特征识别所述对话语音信息中所述收银员的语音；步骤S106，当所述收银员的语音中出现预设的特定词汇时，启动摄像设备采集所述收银操作的视频信息；步骤S108，根据所述视频信息判定所述收银操作是否违反操作规范。在本实施例的步骤S104中，提取所述对话语音信息中各说话人的声纹特征；将提取的所述声纹特征与预先构建的收银员的个体声纹模型相匹配，以识别出所述对话语音信息中所述收银员的语音。在本实施例的步骤S106中，当所述语音中出现预设的特定词汇时，启动所述摄像设备录制指定时长的收银操作视频信息，并记录所述特定词汇出现时间，其中，所述特定词汇至少包括以下之一：“扫我的码”、“现金”、“更换支付方式”。在本实施例的步骤S108中，当出现“现金”特定词汇时，分析所述视频信息中收银员是否打开收银台，若没有打开，则判定该收银操作违反操作规范；当出现“扫我的码”特定本文档来自技高网...

【技术保护点】
1.一种基于语音识别的收银监督方法，其特征在于，包括：/n采集收银操作过程中收银员与顾客的对话语音信息；/n根据声纹特征识别所述对话语音信息中所述收银员的语音；/n当所述收银员的语音中出现预设的特定词汇时，启动摄像设备采集所述收银操作的视频信息；/n根据所述视频信息判定所述收银操作是否违反操作规范。/n

【技术特征摘要】
1.一种基于语音识别的收银监督方法，其特征在于，包括：
采集收银操作过程中收银员与顾客的对话语音信息；
根据声纹特征识别所述对话语音信息中所述收银员的语音；
当所述收银员的语音中出现预设的特定词汇时，启动摄像设备采集所述收银操作的视频信息；
根据所述视频信息判定所述收银操作是否违反操作规范。


2.根据权利要求1所述的方法，其特征在于，根据声纹特征识别所述对话语音信息中所述收银员的语音包括：
提取所述对话语音信息中各说话人的声纹特征；
将提取的所述声纹特征与预先构建的收银员的个体声纹模型相匹配，以识别出所述对话语音信息中所述收银员的语音。


3.根据权利要求1所述的方法，其特征在于，当所述收银员的语音中出现预设的特定词汇时，启动摄像设备采集所述收银操作的视频信息包括：
当所述语音中出现预设的特定词汇时，启动所述摄像设备录制指定时长的收银操作视频信息，并记录所述特定词汇出现时间，其中，所述特定词汇至少包括以下之一：“扫我的码”、“现金”、“更换支付方式”。


4.根据权利要求3所述的方法，其特征在于，根据所述视频信息判定所述收银操作是否违反操作规范，包括以下至少之一：
当出现“现金”特定词汇时，分析所述视频信息中收银员是否打开收银台，若没有打开，则判定该收银操作违反操作规范；
当出现“扫我的码”特定词汇时，分析所述视频信息中是否出现收银员拿出手机的动作，如果有，则判定该收银操作违反操作规范；
当出现“更换支付方式”特定词汇时，根据该特定词汇出现时间，确定在预设时间内指定账户中是否有资金进账，如果没有，则判定该该收银操作违反操作规范。


5.一种基于语音识别的收银监督系统，其特征在于，包括：
语音采集模块，用于采集收银操作过程中收银员与顾客的对话语音信息；
声纹识别模块，用于根据声纹特征识别所述对话语音信息中所...

【专利技术属性】
技术研发人员：张竞艺，仇雪雅，
申请(专利权)人：秒针信息技术有限公司，
类型：发明
国别省市：北京;11