基于智能眼镜进行数据流获取和显示的方法及智能眼镜技术

本发明专利技术涉及一种通过智能眼镜进行数据流获取和显示的方法，包括，通过智能眼镜的数据获取模块，从远程服务器获取一个或多个数据流；通过智能眼镜的数据显示模块，对所述一个或多个数据流进行处理，将所述一个或多个数据流分布在显示画布的不同区域上；通过智能眼镜的显示交互模块，接收用户的操作指令，并根据所述操作指令对所述显示画布上的数据流进行操作。通过本发明专利技术公开的一个或多个实施方式，可以在多人会议过程中，将会议的数据进行整合显示，并通过智能眼镜的显示扩展功能，分布到以用户为中心的画布中，实现高效、便捷的信息沟通。

【技术实现步骤摘要】
基于智能眼镜进行数据流获取和显示的方法及智能眼镜
本专利技术涉及软件系统领域，尤其涉及一种基于智能眼镜进行数据流获取和显示的方法。
技术介绍
传统的远程多人会议模式是参会人员通过PC或手机登录会议软件，并进入对应的会议室，受限于PC或手机的屏幕尺寸的限制，屏幕所呈现的信息只能通过外接显示设备，或者线性切换的方式查看共享内容窗口以及参会者的摄像头画面：例如隐藏所有摄像头画面，显示全屏共享内容窗口；例如全屏割裂成一大一小两个窗口，一个共享窗口，一个所有摄像头画面。多人会议中，参会者们无法同时查看共享内容窗口和摄像头画面。参会者能够接受的信息是有限的，因此导致远程会议的效率低下。
技术实现思路
本专利技术的一个目的在于提供一种基于智能眼镜进行数据流获取和显示的方法，包括，通过智能眼镜的数据获取模块，从远程服务器获取一个或多个数据流；通过智能眼镜的数据显示模块，对所述一个或多个数据流进行处理，将所述一个或多个数据流分布在显示画布的不同区域上；通过智能眼镜的显示交互模块，接收用户的操作指令，并根据所述操作指令对所述显示画布上的数据流进行操作。本专利技术的另一个目的在于提供一种智能眼镜，包括数据获取模块，所述数据获取模块被配置为从远程服务器获取一个或多个数据流；数据显示模块，所述数据显示模块被配置为对所述一个或多数据流进行处理，将所述一个或多个数据流分布在显示画布的不同区域上；显示交互模块，所述显示交互模块被配置为接收用户的操作指令，并根据所述操作指令对所述显示画布上的数据流进行操作。本专利技术的优势在于：1、用户通过智能眼镜的视野（FOV）移动，可以在无限大空间的屏幕获取多人会议视频信息，并将视频信息以多窗口的形式显示在智能眼镜显示屏上，显示共享内容窗口以及参会者的摄像头画面窗口。共享窗口包括桌面共享，窗口共享，白板共享等。2、多窗口形式所呈现的信息，用户可以可通过智能眼镜所提供的交互方式（带传感器自然头动的方式、触摸板的滑动）查看和选择多人协同会议中各端摄像头画面、共享内容窗口、或者其他参考内容窗口。窗口大小不受限于显示屏幕大小。3、”分享者”们和智能眼镜端“观看者“们多端可通过在线多人视频通信技术，进行连通，参与多人协同会议。4、智能眼镜端通过监视输入数据流类型来分不同窗口显示。5、智能眼镜端新增不同窗口位置以用户为中心点往外围铺开。通过本专利技术公开的一个或多个实施方式，可以在多人会议过程中，将会议的数据进行整合显示，并通过智能眼镜的显示扩展功能，分布到以用户为中心的画布中，实现高效、便捷的信息沟通。附图说明图1示出了本专利技术的一个或多个实施例的智能眼镜的结构示意图；图2示出了本专利技术的一个或多个实施例的显示画布和显示装置的显示画面的示意图；图3示出了根据本专利技术的一个或多个实施例的多人会议系统架构图；图4示出了根据本专利技术的一个或多个实施例的基于智能眼镜的数据获取和显示的方法的流程框图；图5示出了根据本专利技术的一个或多个实施例的数据流的处理方法；图6示出了根据本专利技术的一个或多个实施例的数据流的合并之后在显示画布的排布的示意图；图7示出了根据本专利技术的一个或多个实施例的智能眼镜的多人会议系统的架构原理图。具体实施方式为更进一步阐述本专利技术为达成预定专利技术目的所采取的技术手段及功效，以下结合附图及较佳实施例，对依据本专利技术提出的基于智能眼镜进行数据流获取和显示的方法及智能眼镜的具体实施方式、结构、特征及其功效，详细说明如后。如图1所示，示出了根据本专利技术的一个或多个实施例的智能眼镜100的结构示意图。在其中一个实施例中，智能眼镜100为增强现实（AugmentedReality，AR）眼镜。AR眼镜能够将虚拟的信息叠加到真实世界，使真实世界画面和虚拟画面能够叠加到一起，实现两种信息的相互补充。可以理解的是，一些实施方式中，智能眼镜100为其它类型的眼镜，例如混合现实（MixedReality,MR）眼镜，虚拟现实（VirtualReality，VR）眼镜。本领域的技术人员可以理解，本专利技术所述的智能眼镜的形态也可以是非常规眼镜的外观形态，例如为头盔、头套等头戴式设备。智能眼镜100可以包括一个或两个显示装置10，显示装置可以采用以棱镜、LCD、光波导、Birdbath、自由曲面反射镜等可以实现半透半反的显示方案。此外，智能眼镜100还可以包括镜架20，在一些实施方式中，可以将智能眼的传感器模块、处理模块、存储模块和电池模块放到镜架20内部，在另一些实施方式中，也可以将传感器模块、处理模块、存储模块和电池模块的一个或多个部件集成在另一个独立的配件（未示出），通过数据线和智能眼镜100进行连接。如图2所示，示出了本专利技术的一个或多个实施例的显示画布和显示装置的显示画面的示意图。智能眼镜100的显示装置可以生成以佩戴者为中心的一个虚拟的显示画布，显示画布可以理解为是一个远大于显示装置10的显示画面的一个显示区域，显示装置10被配置用来将显示画布的部分区域呈现给用户。当智能眼镜100检测到用户的头动的时候，显示装置10的显示画面也随着用户的头动进行变化，并将显示画布中的不同位置的内容呈现给用户。在用户处于移动状态（例如步行、跑步），显示画布相对于用户固定。显示装置的显示画面可以根据用户的头控指令进行移动，当检测到头向下移动的时候，则将显示画面也朝下移动。头控指令可以通过智能眼镜100的IMU惯性传感器生成。IMU惯性传感器可以接收并检测用户的头部运动信号，并转化为用户的头部的三维移动量，根据用户的头部的三维移动量，相对用户的FOV移动所述显示画布。如图2所示，示出了显示画布和显示装置显示画面的关系。当检测到用户的投按照箭头方向进行移动的时候，显示装置的显示画面也从实线位置移动到虚线位置。参考图3，示出了根据本专利技术的一个或多个实施例的多人会议系统架构图，其中远程服务器200通过网络连接多个客户端设备，客户端设备包括智能眼镜100、智能手机101、台式电脑102、笔记本电脑103。可以理解，远程服务器200可以连接更多的客户端设备，且本专利技术的一个或多个实施例不限制远程服务器连接的客户端设备的类型和数量。在这种系统架构下，所有的客户端设备均通过远程服务器200进行数据交换，并依靠远程服务器的计算能力进行部分或全部的数据处理。应当注意的是，若智能眼镜100将部分数据处理放到远程服务器进行的时候，应当将远程服务器实现该功能的模块认为是智能眼镜100的一部分。如图4所示，示出了本专利技术的一个实施例的基于智能眼镜的数据获取和显示的方法的流程框图，所述方法包括：步骤S1、通过智能眼镜的数据获取模块，从远程服务器获取一个或多个数据流；步骤S2、通过智能眼镜的数据显示模块，对所述一个或多个数据流进行处理，将所述一个或多个数据流分布在显示画布的不同区域上；步骤S3、通过智能眼镜的显示交互模块，接收用户的操作指令，并根据所述操作指令对所述显示画布上的数据流进行操作。具体地，在步骤S1中，智能本文档来自技高网...

【技术保护点】
1.一种基于智能眼镜进行数据流获取和显示的方法，包括，/n通过智能眼镜的数据获取模块，从远程服务器获取一个或多个数据流；/n通过智能眼镜的数据显示模块，对所述一个或多数据流进行处理，将所述一个或多个数据流分布在显示画布的不同区域上；/n通过智能眼镜的显示交互模块，接收用户的操作指令，并根据所述操作指令对所述显示画布上的数据流进行操作。/n

【技术特征摘要】
1.一种基于智能眼镜进行数据流获取和显示的方法，包括，
通过智能眼镜的数据获取模块，从远程服务器获取一个或多个数据流；
通过智能眼镜的数据显示模块，对所述一个或多数据流进行处理，将所述一个或多个数据流分布在显示画布的不同区域上；
通过智能眼镜的显示交互模块，接收用户的操作指令，并根据所述操作指令对所述显示画布上的数据流进行操作。


2.根据权利要求1所述的方法，其中，
对所述一个或多个数据流进行处理，将所述一个或多个数据流分布在智能眼镜的显示画布的不同区域上，进一步包括：
根据数据流的一个或多个数据标签，将所述数据流进行分类，对同类的数据流进行合流，并将合流后的数据流分配一个显示窗口，
根据已分配的窗口数量，将显示画布的区域进行分割，将数据流的窗口分布在显示画布的分割后的不同区域上。


3.根据权利要求2所述的方法，其中，
所述数据标签包括数据类型、角色参数，其中
所述数据类型包括音视频数据和共享数据，
所述角色参数包括提供数据流的客户端用户的个人信息。


4.根据权利要求3所述的方法，其中，所述数据标签还包括状态参数，所述状态参数包括激活状态标签和非激活状态标签，
将具有激活状态标签的数据流的显示窗口置于智能眼镜的显示装置的中心位置。


5.根据权利要求4所述的方法，其中，
所述激活状态标签包括语音激活标签，所述语音激活标签在检测到...

【专利技术属性】
技术研发人员：赵维奇，
申请(专利权)人：芋头科技杭州有限公司，
类型：发明
国别省市：浙江;33