远程手术指导和示教系统及方法技术方案

本发明专利技术公开了一种远程手术指导和示教系统及方法，系统包括：手术室子系统，用于获取多路视频信息，与示教子系统进行通话控制，实时同步画面拼接布局信息以及标记信息，将多路视频信息拼接整合成一路视频信息并发送到服务器，接收示教子系统发送的视频信息和音频信息，对视频信息和音频信息进行展示；服务器，用于对远程手术指导和示教系统进行参数设置及通话控制，进行音视频编码数据的转发处理；示教子系统，用于获取手术室子系统发送的一路视频信息和音频信息，并与手术室子系统进行通话控制，实时同步画面拼接布局信息以及标记信息，对手术室子系统发送的一路视频信息和音频信息进行展示，将获取的视频信息和音频信息发送到服务器。送到服务器。送到服务器。

【技术实现步骤摘要】
远程手术指导和示教系统及方法


[0001]本专利技术涉及计算机
，尤其是涉及一种远程手术指导和示教系统及方法。

技术介绍

[0002]传统的手术教学、手术指导，需要相应人员现场观摩、交流，而狭窄的手术室空间必然会限制观摩人员的数量，对手术感染率也会带来负面影响。随着音视频编码、网络通信等技术的发展，医疗行业的信息化水平不断提高，更多的使用实时音视频转播与网络通话技术来进行手术指导与示教，将手术室视频通过网络传输出去，提高了效率。
[0003]手术端传输音视频需要较大的上传带宽：专家端或示教端在观看手术影像时，往往需要同时观看多路视频图像，比如术野图像、腔镜图像、全景图像，并且每一路图像分辨率高达1080P，以一个1080P@的全高清视频为例，一般需要5Mbps的上传带宽，3路图像则需要15Mbps的上传带宽，在局域网尚可，而在互联网上，一般会选择专线网络，大大增加成本。
[0004]手术指导与示教时，遇到患者特殊部位：比如肿瘤等，一般以语音、文字的方式说明，不能直接的在视频中标识。

技术实现思路

[0005]本专利技术的目的在于提供一种远程手术指导和示教系统及方法，旨在解决现有技术中的上述问题。
[0006]本专利技术提供一种远程手术指导和示教系统，包括：
[0007]手术室子系统，用于获取多路视频信息，通过服务器与示教子系统进行通话控制，实时同步画面拼接布局信息以及标记信息，基于所述画面拼接布局信息以及标记信息将所述多路视频信息拼接整合成一路视频信息，将所述一路视频信息和音频信息发送到服务器，通过所述服务器接收示教子系统发送的视频信息和音频信息，并基于所述画面拼接布局信息以及标记信息对所述示教子系统发送的视频信息和音频信息进行展示；
[0008]服务器，用于对所述远程手术指导和示教系统进行参数设置及通话控制，进行音视频编码数据的转发处理；
[0009]示教子系统，用于通过所述服务器获取所述手术室子系统发送的一路视频信息和音频信息，并通过所述服务器与所述手术室子系统进行通话控制，实时同步画面拼接布局信息以及标记信息，根据所述画面拼接布局信息以及标记信息对所述手术室子系统发送的一路视频信息和音频信息进行展示，将获取的视频信息和音频信息发送到所述服务器。
[0010]本专利技术提供一种远程手术指导和示教方法，用于上述远程手术指导和示教系统，所述方法具体包括：
[0011]通过手术室子系统或者示教子系统发起远程手术指导和示教；
[0012]通过所述手术室子系统计算拼接画面的建议分辨率，并根据所述建议分辨率和画面布局样式信息启动画面拼接，并与所述示教子系统进行所述画面布局样式信息和标记信息的实时同步；
[0013]通过所述手术室子系统，对音频信息和拼接后的视屏信息进行编码并通过服务器发送到所述示教子系统；
[0014]通过所述示教子系统，从所述服务器获取所述手术室子系统发送的音频信息和拼接后的视屏信息并进行展示；将从影音录入设备采集的音频信息和视频信息进行编码，并发送到服务器；
[0015]通过所述手术室子系统，从服务器获取所述示教子系统发送的音频信息和视频信息并进行展示。
[0016]采用本专利技术实施例，解决现有技术中解决目前手术示教中视频路数多，实时传输时需要提高要求，高带宽的网络环境，成本高昂的问题，大大节约了传输带宽，节约了成本，大大增加了该系统的实用性，提高了该系统的开放性、可调性，节省了系统资源，通过同屏标记，减少了交流而使用的时间，相应的减少了手术时间和手术分险。
[0017]上述说明仅是本专利技术技术方案的概述，为了能够更清楚了解本专利技术的技术手段，而可依照说明书的内容予以实施，并且为了让本专利技术的上述和其它目的、特征和优点能够更明显易懂，以下特举本专利技术的具体实施方式。
附图说明
[0018]为了更清楚地说明本专利技术具体实施方式或现有技术中的技术方案，下面将对具体实施方式或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本专利技术的一些实施方式，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
[0019]图1是本专利技术实施例的远程手术指导和示教系统的示意图；
[0020]图2是本专利技术实施例的远程手术指导和示教系统的详细示意图；
[0021]图3是本专利技术实施例的远程手术指导和示教方法的流程图。
具体实施方式
[0022]为了解决现有技术中解决目前手术示教中视频路数多，实时传输时需要提高要求，高带宽的网络环境，成本高昂的问题，本专利技术实施例提供了一种用于远程手术指导和示教的系统及方法。
[0023]下面将结合实施例对本专利技术的技术方案进行清楚、完整地描述，显然，所描述的实施例是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术保护的范围。
[0024]在本专利技术的描述中，需要理解的是，术语“中心”、“纵向”、“横向”、“长度”、“宽度”、“厚度”、“上”、“下”、“前”、“后”、“左”、“右”、“竖直”、“水平”、“顶”、“底”、“内”、“外”、“顺时针”、“逆时针”等指示的方位或位置关系为基于附图所示的方位或位置关系，仅是为了便于描述本专利技术和简化描述，而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作，因此不能理解为对本专利技术的限制。
[0025]此外，术语“第一”、“第二”仅用于描述目的，而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此，限定有“第一”、“第二”的特征可以明示或者
隐含地包括一个或者更多个所述特征。在本专利技术的描述中，“多个”的含义是两个或两个以上，除非另有明确具体的限定。此外，术语“安装”、“相连”、“连接”应做广义理解，例如，可以是固定连接，也可以是可拆卸连接，或一体地连接；可以是机械连接，也可以是电连接；可以是直接相连，也可以通过中间媒介间接相连，可以是两个元件内部的连通。对于本领域的普通技术人员而言，可以具体情况理解上述术语在本专利技术中的具体含义。
[0026]系统实施例
[0027]根据本专利技术实施例，提供了一种远程手术指导和示教系统，图1是本专利技术实施例的远程手术指导和示教系统的示意图，如图1所示，根据本专利技术实施例的远程手术指导和示教系统具体包括：
[0028]手术室子系统10，用于获取多路视频信息，通过服务器与示教子系统进行通话控制，实时同步画面拼接布局信息以及标记信息，基于所述画面拼接布局信息以及标记信息将所述多路视频信息拼接整合成一路视频信息，将所述一路视频信息和音频信息发送到服务器，通过所述服务器接收示教子系统发送的视频信息和音频信息，并基于所述画面拼接布局信息以及标记信息对所述示教子系统发送的视频信息和音频信息进行展示；手术室子系统10具体包括：
[0029]多路图像采集模块，用于采集多路视频信息本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种远程手术指导和示教系统，其特征在于，包括：手术室子系统，用于获取多路视频信息，通过服务器与示教子系统进行通话控制，实时同步画面拼接布局信息以及标记信息，基于所述画面拼接布局信息以及标记信息将所述多路视频信息拼接整合成一路视频信息，将所述一路视频信息和音频信息发送到服务器，通过所述服务器接收示教子系统发送的视频信息和音频信息，并基于所述画面拼接布局信息以及标记信息对所述示教子系统发送的视频信息和音频信息进行展示；服务器，用于对所述远程手术指导和示教系统进行参数设置及通话控制，进行音视频编码数据的转发处理；示教子系统，用于通过所述服务器获取所述手术室子系统发送的一路视频信息和音频信息，并通过所述服务器与所述手术室子系统进行通话控制，实时同步画面拼接布局信息以及标记信息，根据所述画面拼接布局信息以及标记信息对所述手术室子系统发送的一路视频信息和音频信息进行展示，将获取的视频信息和音频信息发送到所述服务器。2.根据权利要求1所述的系统，其特征在于，所述手术室子系统具体包括：多路图像采集模块，用于采集多路视频信息；第一信令模块，用于与所述服务器进行通话控制信息，并进行画面拼接布局信息和标记信息的实时同步交互，在每次输入完成或写完一个字符后，将新的标记信息进行转换，并将转换后的标记信息进行同步，其中，所述标记信息所支持的标记方式包括以下至少之一：规则图像的标记、不规则图形的标记、语音标记、文字标记；图像处理模块，用于接收所述图像采集模块传来的多路视频信息，根据所述第一信令模块发送的画面拼接布局信息将所述多路视频信息进行画面拼接整合调整，拼接整合成为一路视频信息，并根据所述第一信令模块发送的标记信息将标记整合在所述一路视频信息中；第一编解码模块，用于将所述图像处理模块输出的所述一路视频信息和音频信息进行编码发送到服务器，解码从服务器获取的音频信息和视频信息，基于所述画面拼接布局信息以及标记信息，输出解码后的音频信息和视频信息到多媒体播放终端，并通过覆盖当前视频信息的透明窗口对标记信息进行实时展示。3.根据权利要求1所述的系统，其特征在于，所述服务器具体包括：信令服务单元，用于进行手术室子系统和示教子系统的用户注册、通话控制、画面拼接布局信息和标记信息的同步实时控制；流媒体服务单元，用于将所述手术室子系统发送的一路视频信息和音频信息转发到所述示教子系统，将所述示教子系统发送的视频信息和音频信息发送到所述手术室子系统。4.根据权利要求1所述的系统，其特征在于，所述示教子系统具体包括：第二信令模块，用于与服务器交互流媒体控制信息，通过所述服务器与所述手术室子系统进行通话控制，并进行画面拼接布局信息和标记信息的实时同步交互，在每次输入完成或写完一个字符后，将新的标记信息进行转换，并将转换后的标记信息进行同步；第二编解码模块，用于解码从服务器获取的音频信息和视频信息，基于所述画面拼接布局信息以及标记信息，输出解码后的音频信息和视频信息到多媒体播放终端...

【专利技术属性】
技术研发人员：王昊，许成，张克义，
申请(专利权)人：矩数西安智能科技有限公司，
类型：发明
国别省市：