一种基于AR眼镜的会议模拟系统及方法技术方案

本发明专利技术公开了一种基于AR眼镜的会议模拟系统及方法，属于AR模拟技术领域。该系统包括会议模拟平台构建模块、信息交互模块、时间预测模块、算法模块、信息提醒模块。所述会议模拟平台构建模块的输出端与所述信息交互模块的输入端相连接；所述信息交互模块的输出端与所述时间预测模块的输入端相连接；所述算法模块的输出端与所述时间预测模块的输入端相连接；所述时间预测模块的输出端与所述AR云平台相连接；所述AR云平台的输出端与所述信息提醒模块的输入端相连接。本发明专利技术能够实现利用AR眼镜进行模拟会议过程中，提前技术校正的过程，减少数据传输的冗杂程度，降低延时效果；同时也可以对会议状态进行检测，对丢失信息进行提示。示。示。

【技术实现步骤摘要】
一种基于AR眼镜的会议模拟系统及方法


[0001]本专利技术涉及AR模拟
，具体为一种基于AR眼镜的会议模拟系统及方法。

技术介绍

[0002]R眼镜是AR技术的具体体现，AR技术是一种将真实世界信息和虚拟世界信息无缝集成的技术，AR技术可以在屏幕上把虚拟世界套在现实世界并进行互动。
[0003]在目前的技术中，利用AR眼镜实现远程会议已经逐渐成熟，其能够满足用户在远程却能享受到在会议现场的真实感，然而在远程会议的过程中，通常由于会议时间的问题以及与会人的状态变化，导致AR眼镜出现大幅的位置变化，进而导致AR影像晃动，现有的技术标定或者跟踪尚无法做到“零间隔”处理，容易在后续技术校正过程中出现数据拥挤导致宕机或者是用户出现眩晕等不适感觉。同时在这样的技术校正下，容易让用户丢失会议内容。

技术实现思路

[0004]本专利技术的目的在于提供一种基于AR眼镜的会议模拟系统及方法，以解决上述
技术介绍
中提出的问题。
[0005]为了解决上述技术问题，本专利技术提供如下技术方案：一种基于AR眼镜的会议模拟系统，该系统包括会议模拟平台构建模块、信息交互模块、时间预测模块、算法模块、信息提醒模块；所述会议模拟平台构建模块用于构建会议模拟平台，所述会议模拟平台包括虚拟会议室，所述虚拟会议室允许多端口接入；所述信息交互模块用于实现所述多端口的任一端口与AR眼镜进行数据交互，所述数据交互包括语音数据交互、图像数据交互；所述时间预测模块用于AR云平台通过注册的个人信息数据，挑选出当前用户参与虚拟会议的历史数据内容，获取当前用户在历史数据内容中每次会议下出现技术校正的时长；构建时间预测模型，生成当前用户的个性化技术校正预测时间，输出至AR云平台，提前准备调用技术校正数据端口，满足用户在虚拟会议中的及时技术校正；所述AR云平台指AR眼镜的数据云平台处理器；所述算法模块用于实现对AR眼镜的技术校正；所述信息提醒模块用于反馈提示信息至用户端口；所述会议模拟平台构建模块的输出端与所述信息交互模块的输入端相连接；所述信息交互模块的输出端与所述时间预测模块的输入端相连接；所述算法模块的输出端与所述时间预测模块的输入端相连接；所述时间预测模块的输出端与所述AR云平台相连接；所述AR云平台的输出端与所述信息提醒模块的输入端相连接。
[0006]根据上述技术方案，所述会议模拟平台构建模块包括平台构建单元、虚拟会议室构建单元；所述平台构建单元用于构建会议模拟平台；所述虚拟会议室构建单元用于在会议模拟平台上构建虚拟会议室，并创立虚拟会议室的多端口，允许用户进行接入；
所述平台构建单元的输出端与所述虚拟会议室构建单元的输入端相连接。
[0007]根据上述技术方案，所述信息交互模块包括语音数据交互单元、图像数据交互单元；所述语音数据交互单元用于获取与AR眼镜进行数据交互的语音交互数据；所述图像数据交互单元用于获取与AR眼镜进行数据交互的图像交互数据；所述语音数据交互单元、图像数据交互单元的输出端与所述时间预测模块的输入端相连接。
[0008]根据上述技术方案，所述时间预测模块包括历史数据采集单元、指令调用单元；所述历史数据采集单元用于AR云平台通过注册的个人信息数据，挑选出当前用户参与虚拟会议的历史数据内容，获取当前用户在历史数据内容中每次会议下出现技术校正的时长；所述指令调用单元用于构建时间预测模型，生成当前用户的个性化技术校正预测时间，输出至AR云平台，提前准备调用技术校正数据端口，满足用户在虚拟会议中的及时技术校正；所述历史数据采集单元的输出端与所述指令调用单元的输入端相连接。
[0009]根据上述技术方案，所述算法模块包括标定算法单元、跟踪算法单元；所述标定算法单元用于对人眼和AR眼镜的跟踪图像进行标定，保证人眼能看到准确的虚实融合效果；所述跟踪算法单元用于对被跟踪的图像进行预处理，得到该图像的特征点集合，然后实时状态下将视频流中的图像进行匹配。
[0010]所述标定算法、跟踪算法均采用相关的现有技术。
[0011]根据上述技术方案，所述信息提醒模块包括数据处理单元、信息提醒单元；所述数据处理单元用于获取本次会议下AR云平台调用算法模块任一段实际技术校正时长A，调取时长A下的语音数据信息，记为待处理数据；在待处理数据中获取数据关键点，所述数据关键点代表任一词语在待处理数据中的语音重复次数超出B次，所述B为系统设置的常数阈值；将所有数据关键点记为集合C，该集合C为时长A的关键数据集合；获取本次会议记录中，时长A后的会议时长记为时长；获取时长中的语音数据信息，获取后续关键词，所述后续关键词代表与时长A的关键数据集合中相同的词语；所述信息提醒单元用于获取后续关键词的时间点，若存在任一后续关键词的时间点处于本次会议下AR云平台调用算法模块任一段实际技术校正时长中，则反馈提示信息至用户端口；所述提示信息中包括时长A的会议记录数据以及存在时间点处于本次会议下AR云平台调用算法模块任一段实际技术校正时长中后续关键词。
[0012]一种基于AR眼镜的会议模拟方法，该方法包括以下步骤：S1、构建会议模拟平台，所述会议模拟平台包括虚拟会议室，所述虚拟会议室允许多端口接入，所述多端口的任一端口与AR眼镜实现数据交互；所述数据交互包括语音数据交互、图像数据交互；S2、用户穿戴AR眼镜后，注册个人信息数据至AR云平台，AR云平台允许用户通过与
当前AR眼镜连接的数据端口连接至虚拟会议室，实现用户远程参与虚拟会议；S3、AR云平台通过注册的个人信息数据，挑选出当前用户参与虚拟会议的历史数据内容，获取当前用户在历史数据内容中每次会议下出现技术校正的时长；S4、构建时间预测模型，生成当前用户的个性化技术校正预测时间，输出至AR云平台，提前准备调用技术校正数据端口，满足用户在虚拟会议中的及时技术校正；所述技术校正指由于AR眼镜位置变化导致的虚拟图像晃动或卡顿的情况下，AR云平台调用算法模块进行调节的过程。
[0013]根据上述技术方案，所述构建时间预测模型包括：构建BP神经网络，设置输入层、隐含层、输出层；所述隐含层节点个数计算如下：其中,h为隐含层节点数目，m为输入层节点数目，n为输出层节点数目，为1至10之间的调节常数；获取K组历史数据内容，将每一组历史数据中的会议指标作为输入，将对应的每次会议下出现技术校正的时间点作为输出；所述输入包括会议总时长、会议开始时间、会议参与人数；则=3，n=1，a为1至10；所述输出包括L组输出，K组历史数据内容中每次会议下出现技术校正的第一次时间点记为第一组输出；所述L代表历史数据内容中单次会议中出现技术校正的时间点数量的最小值；每次选取一组输出，进行计算：其中，输出层、隐含层均采取S型传递函数计算，即：其中，指单极性 sigmoid 函数，x代表输入；输出误差函数E为：其中，为期望输出；为网络的计算输出，i代表序号，不断调节网络权值和阈值使误差函数E达到最小，获取当前的输出值作为时间预测模型的输出值；共计选取L组输出进行计算，生成L个技术校正的时间点，输出至AR云平台，作为预测技术本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种基于AR眼镜的会议模拟系统，其特征在于：该系统包括会议模拟平台构建模块、信息交互模块、时间预测模块、算法模块、信息提醒模块；所述会议模拟平台构建模块用于构建会议模拟平台，所述会议模拟平台包括虚拟会议室，所述虚拟会议室允许多端口接入；所述信息交互模块用于实现所述多端口的任一端口与AR眼镜进行数据交互，所述数据交互包括语音数据交互、图像数据交互；所述时间预测模块用于AR云平台通过注册的个人信息数据，挑选出当前用户参与虚拟会议的历史数据内容，获取当前用户在历史数据内容中每次会议下出现技术校正的时长；构建时间预测模型，生成当前用户的个性化技术校正预测时间，输出至AR云平台，提前准备调用技术校正数据端口，满足用户在虚拟会议中的及时技术校正；所述AR云平台指AR眼镜的数据云平台处理器；所述算法模块用于实现对AR眼镜的技术校正；所述信息提醒模块用于反馈提示信息至用户端口；所述会议模拟平台构建模块的输出端与所述信息交互模块的输入端相连接；所述信息交互模块的输出端与所述时间预测模块的输入端相连接；所述算法模块的输出端与所述时间预测模块的输入端相连接；所述时间预测模块的输出端与所述AR云平台相连接；所述AR云平台的输出端与所述信息提醒模块的输入端相连接。2.根据权利要求1所述的一种基于AR眼镜的会议模拟系统，其特征在于：所述会议模拟平台构建模块包括平台构建单元、虚拟会议室构建单元；所述平台构建单元用于构建会议模拟平台；所述虚拟会议室构建单元用于在会议模拟平台上构建虚拟会议室，并创立虚拟会议室的多端口，允许用户进行接入；所述平台构建单元的输出端与所述虚拟会议室构建单元的输入端相连接。3.根据权利要求1所述的一种基于AR眼镜的会议模拟系统，其特征在于：所述信息交互模块包括语音数据交互单元、图像数据交互单元；所述语音数据交互单元用于获取与AR眼镜进行数据交互的语音交互数据；所述图像数据交互单元用于获取与AR眼镜进行数据交互的图像交互数据；所述语音数据交互单元、图像数据交互单元的输出端与所述时间预测模块的输入端相连接。4.根据权利要求1所述的一种基于AR眼镜的会议模拟系统，其特征在于：所述时间预测模块包括历史数据采集单元、指令调用单元；所述历史数据采集单元用于AR云平台通过注册的个人信息数据，挑选出当前用户参与虚拟会议的历史数据内容，获取当前用户在历史数据内容中每次会议下出现技术校正的时长；所述指令调用单元用于构建时间预测模型，生成当前用户的个性化技术校正预测时间，输出至AR云平台，提前准备调用技术校正数据端口，满足用户在虚拟会议中的及时技术校正；所述历史数据采集单元的输出端与所述指令调用单元的输入端相连接。5.根据权利要求1所述的一种基于AR眼镜的会议模拟系统，其特征在于：所述算法模块包括标定算法单元、跟踪算法单元；所述标定算法单元用于对人眼和AR眼镜的跟踪图像进行标定，保证人眼能看到准确的虚实融合效果；所述跟踪算法单元用于对被跟踪的图像进行预处理，得到该图像的特征点集合，然后
实时状态下将视频流中的图像进行匹配。6.根据权利要求1所述的一种基于AR眼镜的会议模拟系统，其特征在于：所述信息提醒模块包括数据处理单元、信息提醒单元；所述数据处理单元用于获取本次会议下AR云平台调用算法模块任一段实际技术校正时长A，调取时长A下的语音数据信息，记为待处理数据；在待处理数据中获取数据关键点，所述数据关键点代表任一词语在待处理数据中的语音重复次数超出B次，所述B为系统设置的常数阈值；将所有数据关键点记为集合C，该集合C为时长A的关键数据集合；获取本次会议记录中，时长...

【专利技术属性】
技术研发人员：廖建鲜，朱猛，
申请(专利权)人：唯羲科技有限公司，
类型：发明
国别省市：