【技术实现步骤摘要】
一种全息互动远程会议方法及系统
[0001]本专利技术属于虚拟现实
，尤其涉及一种全息互动远程会议方法及系统。
技术介绍
[0002]全息远程会议通常涉及使用全息显示技术，该技术可以在远程会议参与者之间传输视觉信息，以创造出一种沉浸式的虚拟会议体验。传统的全息显示技术在执行全息远程会议时通常存在以下问题和不足：传统的全息远程会议系统，虽然可以传输全息图像和模型，但与会者的实时互动性受到限制，与会者无法在虚拟环境中进行实时的交互操作，也难以从系统获得实时的反馈信息，容易影响与会者的会议谈论积极性，全息远程会议系统也无法快速调整互动反馈参数以满足与会者的期望。
技术实现思路
[0003]本专利技术提供一种全息互动远程会议方法及系统，旨在解决上述
技术介绍
提到的问题。
[0004]本专利技术是这样实现的，提供一种全息互动远程会议方法，步骤包括：实时监测并采集会议室中与会者的实时数据并进行预处理，实时数据包括但不限于实时的手势图像和语音信号；通过训练后的分类模型对预处理后的实时数据进行分类分析以得到分类结...
【技术保护点】
【技术特征摘要】
1.一种全息互动远程会议方法，其特征在于，步骤包括：实时监测并采集会议室中与会者的实时数据并进行预处理，实时数据包括实时的手势图像和语音信号；通过训练后的分类模型对预处理后的实时数据进行分类分析以得到分类结果，其中，所述分类结果为一个概率向量，概率向量中每个元素表示不同类别的概率，手势分类任务中不同类别表示不同的手势，语音指令分类任务中不同类别表示不同的语音指令；对分类结果进行解码并找到概率最高的类别，将解码后的类别映射为相应的交互操作或虚拟环境行为下的参数，设为初始交互反馈参数；根据历史数据训练策略网络，结合当前会议阶段通过训练好的策略网络对初始交互反馈参数进行优化调整以生成最优的交互反馈参数，历史数据包括历史的各种不同的手势、语音指令及会议阶段信息；根据最优的交互反馈参数在虚拟环境中生成相应的交互内容以进行实时互动，其中，交互内容包括渲染全息图像、播放动画或显示文字提示。2.根据权利要求1所述的全息互动远程会议方法，其特征在于，所述通过训练后的分类模型对预处理后的实时数据进行分类分析以得到分类结果的步骤包括：将预处理后的实时数据输入已经训练好的分类模型中，并在分类模型中进行前向传播，以将实时数据通过网络层逐层处理得到输出，输出表示为各个类别的得分；将输出归一化为一个概率分布，即为分类结果，Y（z
i
）= ，其中，i为当前类别的索引，i=1、2、
…
、K，K为所有类别的总数，z
i
为分类模型输出的类别i的得分，Y（z
i
）表示为类别i的概率，所有类别的概率之和为 1。3.根据权利要求1所述的全息互动远程会议方法，其特征在于，所述对分类结果进行解码并找到概率最高的类别，将解码后的类别映射为相应的交互操作或虚拟环境行为下的参数，设为初始交互反馈参数的步骤包括：找到分类结果的概率向量中的最大值对应的索引，并根据对应的索引确定类别以作为解码后的类别；创建一个包含所有类别标签的字典，其中，字典的键是各类别的索引，值是与各类别的索引一一关联的类别标签，为用来标识不同类别的唯一标识符；根据解码后的类别的索引从字典中找到对应的类别标签并设为目标类别标签，与目标类别标签对应的类别设为目标类别；将目标类别标签代入映射关系以将目标类别映射到交互参数，并设为初始交互反馈参数，其中，映射关系是预先设置的规则、公式或数据表格。4.根据权利要求1所述的全息互动远程会议方法，其特征在于，所述根据历史数据训练策略网络的步骤包括：将交互反馈的参数作为动作，历史数据作为状态，以定义状态空间和动作空间，其中，定义的动作空间涵盖各种可能的交互反馈参数，历史数据包括但不限于历史的各种不同的手势、语音指令及会议阶段信息；根据动作与状态创建一个Q值表并初始化，其中，所述Q值表的每个条目表示状态
‑
动作对应的Q值，Q值为用于记录每个状态下采取每个动作的估计回报值，每个状态对应至少一
个动作；从初始状态开始，对于每个状态，随机选择一个动作；执行选择的动作与环境互动以获取下一个状态和奖励；根据奖励及下一个状态的最大Q值更新Q值表中的Q值，以逐步调整每个状态...
【专利技术属性】
技术研发人员：汪文才，
申请(专利权)人：云视图研智能数字技术深圳有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。