【技术实现步骤摘要】
本申请涉及智能控制领域，且更为具体地，涉及一种应用于沉浸展演的便携式空间定位遥感交互控制系统。
技术介绍
1、随着数字科技的加速迭代，人们对于艺术的体验方式产生了革命性的变化，用户不再是被动接受艺术作品，而是成为了体验的一部分。
2、沉浸式展演作为一种新兴的艺术表现形式，近年来在艺术界和观众中引起了广泛关注。具体来说，沉浸展演，或称为沉浸式艺术，是一种结合了艺术、科技与用户互动的新型展览形式，它通过创造一个多感官的体验空间，让用户在享受艺术的同时能够更加深入地参与和体验。
3、但目前的沉浸展演通常需要用户佩戴特定的设备，如头显、手柄等，这种设备依赖性可能限制了展览的参与度和普及性，从而影响体验的流畅度和真实感。此外，目前虚拟现实和增强现实技术仍存在一些技术限制，如使用单一方式(例如只能依靠用户的动作识别)来进行交互控制，这种方式不能很好地理解用户的交互意图和需求。
4、因此，期望一种应用于沉浸展演的便携式空间定位遥感交互控制系统。
技术实现思路
1、为了解决上述技术问题，提出了本申请。本申请的实施例提供了一种应用于沉浸展演的便携式空间定位遥感交互控制系统，其通过获取由用户通过交互设备绘制的交互图案和由摄像头录制的用户绘制动作过程视频，并采用基于人工智能的图像视频帧处理分析算法来对所述交互图案和所述用户绘制动作过程视频中的各个关键帧进行语义分析和理解，以此基于所述交互图案和用户绘制动作时序关键帧的交互表征特征来自动地得到交互意图类型标签的识别结果，
2、根据本申请的一个方面，提供了一种应用于沉浸展演的便携式空间定位遥感交互控制系统，其包括：
3、交互图案采集模块，用于获取由用户通过交互设备绘制的交互图案；
4、用户绘制动作视频获取模块，用于获取由摄像头录制的用户绘制动作过程视频；
5、关键帧采样模块，用于对所述用户绘制动作过程视频进行关键帧采样以得到用户绘制动作关键帧的时间序列；
6、动作语义特征提取模块，用于对所述用户绘制动作关键帧的时间序列中的各个用户绘制动作关键帧分别进行动作语义特征提取以得到用户绘制动作语义表示向量的时间序列；
7、特征聚合模块，用于将所述用户绘制动作语义表示向量的时间序列通过用户绘制动作语义消息时序传递聚合网络以得到用户绘制动作时序关联聚合表示向量；
8、图案特征提取模块，用于对所述交互图案进行图案特征提取以得到交互图案语义特征向量；
9、特征交互模块，用于使用投影层融合所述交互图案语义特征向量和所述用户绘制动作时序关联聚合表示向量以得到交互意图多模态表征向量作为交互意图多模态表征特征；
10、识别结果生成模块，用于基于所述交互意图多模态表征特征，得到识别结果，并基于所述识别结果返回交互内容。
11、与现有技术相比，本申请提供的一种应用于沉浸展演的便携式空间定位遥感交互控制系统，其通过获取由用户通过交互设备绘制的交互图案和由摄像头录制的用户绘制动作过程视频，并采用基于人工智能的图像视频帧处理分析算法来对所述交互图案和所述用户绘制动作过程视频中的各个关键帧进行语义分析和理解，以此基于所述交互图案和用户绘制动作时序关键帧的交互表征特征来自动地得到交互意图类型标签的识别结果，并返回与所述交互意图类型标签匹配的交互内容。通过该方式，系统能够高精度地识别用户的交互意图，以此提高交互的准确性，从而提供更加个性化和便携的沉浸式体验，以丰富用户体验。
本文档来自技高网...【技术保护点】
1.一种应用于沉浸展演的便携式空间定位遥感交互控制系统，其特征在于，包括：
2.根据权利要求1所述的应用于沉浸展演的便携式空间定位遥感交互控制系统，其特征在于，所述动作语义特征提取模块，用于：将所述用户绘制动作关键帧的时间序列中的各个用户绘制动作关键帧分别通过基于MobileNetV3的动作语义特征提取器以得到所述用户绘制动作语义表示向量的时间序列。
3.根据权利要求2所述的应用于沉浸展演的便携式空间定位遥感交互控制系统，其特征在于，所述特征聚合模块，包括：
4.根据权利要求3所述的应用于沉浸展演的便携式空间定位遥感交互控制系统，其特征在于，所述图案特征提取模块，用于：将所述交互图案通过基于DenseNet模型的图案特征提取器以得到所述交互图案语义特征向量。
5.根据权利要求4所述的应用于沉浸展演的便携式空间定位遥感交互控制系统，其特征在于，所述特征交互模块，包括：
6.根据权利要求5所述的应用于沉浸展演的便携式空间定位遥感交互控制系统，其特征在于，所述表征特征构造单元，用于：
7.根据权利要求6所述的应用于
8.根据权利要求7所述的应用于沉浸展演的便携式空间定位遥感交互控制系统，其特征在于，还包括用于对所述基于MobileNetV3的动作语义特征提取器、所述用户绘制动作语义消息时序传递聚合网络、所述基于DenseNet模型的图案特征提取器、所述投影层和所述基于分类器的交互意图识别器进行训练的训练模块。
9.根据权利要求8所述的应用于沉浸展演的便携式空间定位遥感交互控制系统，其特征在于，所述训练模块，包括：
...【技术特征摘要】
1.一种应用于沉浸展演的便携式空间定位遥感交互控制系统，其特征在于，包括：
2.根据权利要求1所述的应用于沉浸展演的便携式空间定位遥感交互控制系统，其特征在于，所述动作语义特征提取模块，用于：将所述用户绘制动作关键帧的时间序列中的各个用户绘制动作关键帧分别通过基于mobilenetv3的动作语义特征提取器以得到所述用户绘制动作语义表示向量的时间序列。
3.根据权利要求2所述的应用于沉浸展演的便携式空间定位遥感交互控制系统，其特征在于，所述特征聚合模块，包括：
4.根据权利要求3所述的应用于沉浸展演的便携式空间定位遥感交互控制系统，其特征在于，所述图案特征提取模块，用于：将所述交互图案通过基于densenet模型的图案特征提取器以得到所述交互图案语义特征向量。
5.根据权利要求4所述的应用于沉浸展演...
【专利技术属性】
技术研发人员：方冰，丰其云，林聪，朱介勇，张唯，杨绍昌，郭昊，汪婧，蔡涛，赖祥建，王耸耸，张本虎，
申请(专利权)人：浙江大丰数艺科技有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。