一种用于银行网点的物联网设备的场景控制方法及系统技术方案

本发明专利技术提供的用于银行网点的物联网设备的场景控制方法及系统，涉及智慧银行领域；其方法包括：接收并识别第一语音信息、手势信息、人脸信息；根据第一识别结果发送场景开启指令，以便控制中心响应场景开启指令显示待选场景模板；其中，待选场景模板包括迎宾场景、业务咨询场景、自助服务场景、人工服务场景、网银体验场景、业务办理场景；接收并识别第二语音信息、手势信息、人脸信息；根据第二识别结果发送场景选择指令，以便控制中心响应并执行场景选择指令调整指定区域的场景模式。本发明专利技术基于语音、人脸、手势信息实现对无人银行网点物联网设备的智能化控制，且根据客户行为提供对应的业务场景，为客户提供优质的业务办理体验。为客户提供优质的业务办理体验。为客户提供优质的业务办理体验。

【技术实现步骤摘要】
一种用于银行网点的物联网设备的场景控制方法及系统


[0001]本专利技术涉及智慧银行
，具体涉及一种用于银行网点的物联网设备的场景控制方法及系统。

技术介绍

[0002]银行网点在室内设计过程中，各个分区之间的组合应考虑全面，便于使用、配备合理，将每个分区划分得相对独立又互相影响，互相作用，形成一个有机的整体。银行网点一般分为基础网点和精品网点。基础网点，是为普通客户提供交易服务的物理网点，必须设置自助服务区，咨询服务区、咨询引导区、客户等候区、现金服务区、非现金服务区；精品网点：基本设施、功能全面，能够满足贵宾客户的金融服务需求，必须设置自助服务区、咨询引导区、客户等候区、现金服务区、非现金服务区、电子银行体验区。
[0003]顾客到银行办理业务，在进入银行网点前，先进行业务咨询，然后选择自助服务、人工服务或网银体验；若是客户选择人工服务，则进行取号、填单、等候、叫号、业务办理、评价，然后离开。
[0004]目前在银行业中，几乎所有银行网点对于设备的开和关、设备运行状态收集及监控都需要依赖人工或者多个指定系统协作完成。使用人工管理的方式，无疑会带来人力的极大浪费，网点的开门、撤防、开灯、设备开机、空调开启、新风打开等以及这一系列设备的逆向操作都是需要人为干预的；也有些网点运用了设备自带的自动开关属性，设置了一些设备定时的开关操作，虽然暂时无需人为操作，但是在特殊情况到来，比如临检时，依然需要现场人员逐一操作。此外，对于网点设备故障情况，从设备的故障发现、故障解决都是需要人员介入的，不仅带来了时效上的延迟，也是属于重复性、易被遗忘性工作。故当前大力推广的无人银行网点，通过智能设备的应用虽然在一定程度上减少了人力成本的投入，但是由于业务办理流程过程中无人引导，也造成如存在业务办理时间长、网点环境不舒适等问题。
[0005]例如，中国专利申请2020102057796公开了基于物联网的银行网点营业管控方法及系统，它能够有效实现针对银行网点的自动化且智能化的营业管控，并能够有效提高银行网点中设备故障的发现及处理效率，进而能够有效提高银行网点营业过程的可靠性。但是它无法实现基于具体的业务办理场景，为顾客提供专有的业务服务，更无法实现无人银行网点的智能化服务。
[0006]又例如，中国专利申请2021113177635，公开了金融场景类用户感知信息处理方法、系统、设备及应用，线下网点各物联终端传感器数据、线上开放银行埋点数据、第三方系统推送信息、行内其他平台或业务流程数据的采集；对数据的ETL、离线计算、实时计算、AI算法分析等进行计算和分析；通过数据建模进行分层数据融合，实现数据资产建设；通过统一服务开放、统一权限管理、统一运维管理、统一告警中心实现数据服务体系建设；支持线上、线下网点数字化运营进行数据应用；挖掘用户应用场景，提供更智能化的个性化服务，提升用户感知。该专利技术提供更精准个性化的服务，如帮助营业厅分析访客构成、热点区域，
客流轨迹，有针对性的提升线下业务营销推广；但是其未能实现银行网点物联网设备的自动化管控，更未能实现基于用于用户办理业务的场景控制。

技术实现思路

[0007]本专利技术目的在于提供一种用于银行网点的物联网设备的场景控制方法及系统，充分解决无人银行网点的业务办理过程中无人引导、业务办理时间长、网点环境不舒适等问题。
[0008]为达成上述目的，本专利技术提出如下技术方案：一种用于银行网点的物联网设备的场景控制方法，包括：
[0009]接收并识别第一语音信息、第一手势信息和第一人脸信息；
[0010]根据对第一语音信息、第一手势信息和第一人脸信息的第一识别结果，发送场景开启指令，以便控制中心响应场景开启指令显示待选场景模板；其中，所述待选场景模板预设在所述控制中心内，包括迎宾场景、业务咨询场景、自助服务场景、人工服务场景、网银体验场景、业务办理场景；
[0011]接收并识别第二语音信息、第二手势信息和第二人脸信息；
[0012]根据对第二语音信息、第二手势信息和第二人脸信息的第二识别结果，发送场景选择指令，以便控制中心响应并执行场景选择指令调整指定区域的场景模式；其中，所述场景选择指令至少包括待选场景模板中的其中一种场景。
[0013]进一步的，接收并识别获得所述第一识别结果或第二识别结果的过程包括：
[0014]构建语音通道、手势通道、人脸通道，并分别通过语音通道、手势通道、人脸通道接收人机交互的指称对象输入的语音信息、手势信息和人脸信息；
[0015]从语音信息、手势信息和人脸信息中分别提取语音指称对象约束信息、手势指称对象约束信息、人脸指称对象约束信息，其中，所述手势指称对象约束信息包括当前指点手势所维持的时间统计量；
[0016]将语音、手势、人脸指称对象约束信息与虚拟环境中模型对象的特征信息进行对比，确定人机交互的指称对象；
[0017]从语音指称对象约束信息中提取对指称对象的命令信息，获得识别结果。
[0018]进一步的，从语音信息、手势信息和人脸信息获得识别结果的具体过程为：
[0019]构建并应用多通道分层整合模型；其中，多通道分层整合模型包括物理层、词汇层和语法层；
[0020]所述物理层接收由所述语音通道、手势通道和人脸通道输入的语音信息、手势信息、人脸信息；
[0021]所述词汇层包括语音识别解析模块、手势识别解析模块和人脸识别解析模块，其中，语音识别解析模块将物理层接收的语音信息解析为语音指称对象约束信息、手势识别解析模块将物理层接收的手势信息解析为手势指称对象约束信息、人脸识别解析模块将物理层接收的人脸信息解析为人脸指称对象约束信息；
[0022]所述语法层将所述语音指称对象约束信息、手势指称对象约束信息及人脸指称对象约束信息与虚拟环境中模型对象的特征信息进行对比，确定出人机交互的指称对象；以及所述语法层从所述语音指称对象约束信息中提取对所述指称对象的命令信息。
[0023]进一步的，所述多通道分层整合模型还包括语义层；
[0024]所述根据第一识别结果发送场景开启指令和根据第二识别结果发送场景选择指令的过程均为，在所述多通道分层整合模型的语义层将识别结果中获得的所述命令信息作用于指称对象。
[0025]进一步的，所述多通道分层整合模型还包括任务槽和生产系统，所述任务槽包括命令表项以及指称对象表项；
[0026]所述语义层将所述命令信息填入所述任务槽的命令表项、将所述指称对象填入所述任务槽的指称对象表项；
[0027]当所述任务槽完成填充，触发所述生产系统执行任务命令。
[0028]进一步的，还包括：
[0029]获取银行网点场景应用的各影响因素的维度数据，包括任务类型维度、时间维度、光线维度、用户体征状态维度、用户距离维度；
[0030]根据一种或多种所述维度数据，控制调节指定区域的场景模式下各物联网设备输出通道的开启或关闭。
[0031]本专利技术另一技术方案在于公开一本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种用于银行网点的物联网设备的场景控制方法，其特征在于，包括：接收并识别第一语音信息、第一手势信息和第一人脸信息；根据对第一语音信息、第一手势信息和第一人脸信息的第一识别结果，发送场景开启指令，以便控制中心响应场景开启指令显示待选场景模板；其中，所述待选场景模板预设在所述控制中心内，包括迎宾场景、业务咨询场景、自助服务场景、人工服务场景、网银体验场景、业务办理场景；接收并识别第二语音信息、第二手势信息和第二人脸信息；根据对第二语音信息、第二手势信息和第二人脸信息的第二识别结果，发送场景选择指令，以便控制中心响应并执行场景选择指令调整指定区域的场景模式；其中，所述场景选择指令至少包括待选场景模板中的其中一种场景。2.根据权利要求1所述的用于银行网点的物联网设备的场景控制方法，其特征在于，接收并识别获得所述第一识别结果或第二识别结果的过程包括：构建语音通道、手势通道、人脸通道，并分别通过语音通道、手势通道、人脸通道接收人机交互的指称对象输入的语音信息、手势信息和人脸信息；从语音信息、手势信息和人脸信息中分别提取语音指称对象约束信息、手势指称对象约束信息、人脸指称对象约束信息，其中，所述手势指称对象约束信息包括当前指点手势所维持的时间统计量；将语音、手势、人脸指称对象约束信息与虚拟环境中模型对象的特征信息进行对比，确定人机交互的指称对象；从语音指称对象约束信息中提取对指称对象的命令信息，获得识别结果。3.根据权利要求2所述的用于银行网点的物联网设备的场景控制方法，其特征在于，从语音信息、手势信息和人脸信息获得识别结果的具体过程为：构建并应用多通道分层整合模型；其中，多通道分层整合模型包括物理层、词汇层和语法层；所述物理层接收由所述语音通道、手势通道和人脸通道输入的语音信息、手势信息、人脸信息；所述词汇层包括语音识别解析模块、手势识别解析模块和人脸识别解析模块，其中，语音识别解析模块将物理层接收的语音信息解析为语音指称对象约束信息、手势识别解析模块将物理层接收的手势信息解析为手势指称对象约束信息、人脸识别解析模块将物理层接收的人脸信息解析为人脸指称对象约束信息；所述语法层将所述语音指称对象约束信息、手势指称对象约束信息及人脸指称对象约束信息与虚拟环境中模型对象的特征信息进行对比，确定出人机交互的指称对象；以及所述语法层从所述语音指称对象约束信息中提取对所述指称对象的命令信息。4.根据权利要求3所述的用于银行网点的物联网设备的场景控制方法，其特征在于，所述多通道分层整合模型还包括语义层；所述根据第一识别结果发送场景开启指令和根据第二识别结果发送场景选择指令的过程均为，在所述多通道分层整合模型的语义层将识别结果中获得的所述命令信息作用于指称对象。5.根据权利要求4所述的用于银行网点的物联网设备的场景控制方法，其特征在于，所
述多通道分层整合模型还包括任务槽和生产系统，所述任务槽包括命令表项以及指称对象表项；所述语义层将所述命令信息填入所述任务槽的命令表项、将所述指称对象填入所述任务槽的指称对象表项；当所述任务槽完成填充，触发所述生产系统执行任务命令。6.根据权利要求1所述的用于银行网点的物联网设备的场景控制方法，其特征在于，还包括：获取银行网点场景应用的...

【专利技术属性】
技术研发人员：周院平，代品宣，黄华，唐红，邓小飞，孙信中，矫人全，
申请(专利权)人：南京奥拓电子科技有限公司，
类型：发明
国别省市：