多媒体系统以及多媒体操作方法技术方案

本发明专利技术涉及一种多媒体系统以及多媒体操作方法。多媒体系统包括第一携带式电子装置、协作装置、摄影机以及影音处理装置。第一携带式电子装置提供第一操作指令。协作装置耦接第一携带式电子装置，并且接收第一操作指令。协作装置提供多媒体画面，并且多媒体画面随着第一操作指令而改变。摄影机提供视频影像。影音处理装置耦接协作装置以及摄影机，并且接收多媒体画面以及视频影像，以根据多媒体画面以及视频影像输出具有沉浸式影音效果的合成影像。视频影像输出具有沉浸式影音效果的合成影像。视频影像输出具有沉浸式影音效果的合成影像。

【技术实现步骤摘要】
多媒体系统以及多媒体操作方法


[0001]本专利技术涉及一种影音技术，且特别是涉及一种多媒体系统以及多媒体操作方法。

技术介绍

[0002]随着远距教学、视频会议及在线演讲等诸如此类的远程视频服务的需求增加，如何丰富视频操作的使用者体验是本领域主要开发方向之一。举例而言，老师与学生从以往在同一个实体教室中，转变为在不同的实体位置，进行着授课与讨论。但现行的在线教学系统，都是通过在线会议系统的影像与声音进行传播与教学，却少了教学上很重要的沉浸与互动的感觉。
[0003]此外，一般的远程视频服务仅能提供单纯的影像拍摄功能，例如将使用者站在简报前的演讲过程进行拍摄，或者例如将使用者在面对摄影机的即时脸部影像进行拍摄。换言之，一般的远程视频服务仅能提供简单且枯燥的影像内容至观看者端设备。有鉴于此，如何提供多元且具有良好使用者体验的视频效果，以下将提出几个实施例的解决方案。
[0004]本“
技术介绍
”部分只是用来帮助了解本
技术实现思路
，因此在“
技术介绍
”部分所揭露的内容可能包含一些没有构成所属
中普通技术人员所知道的常规技术。在“
技术介绍
”部分所揭露的内容，不代表该内容或者本专利技术一个或多个实施例所要解决的问题，在本专利技术申请前已被所属
中普通技术人员所知晓或认知。

技术实现思路

[0005]本专利技术提供一种多媒体系统以及多媒体操作方法，可合成多媒体画面以及视频影像，以提供沉浸式教学(Immersive education)的影音内容。
[0006]本专利技术的其他目的和优点可以从本专利技术所揭露的技术特征中得到进一步的了解。
[0007]为达成上述之一或部份或全部目的或是其他目的，本专利技术的多媒体系统包括第一携带式电子装置、协作装置、摄影机以及影音处理装置。第一携带式电子装置用于提供第一操作指令。协作装置耦接第一携带式电子装置，并且用于接收第一操作指令。协作装置提供多媒体画面，并且多媒体画面随着第一操作指令而改变。摄影机用于提供视频影像。影音处理装置耦接协作装置以及摄影机，并且用于接收多媒体画面以及视频影像，以根据多媒体画面以及视频影像输出合成影像。
[0008]为达成上述之一或部份或全部目的或是其他目的，本专利技术的多媒体操作方法包括以下步骤：通过第一携带式电子装置提供第一操作指令；通过协作装置接收第一操作指令，并且提供多媒体画面，其中多媒体画面随着第一操作指令而改变；通过摄影机提供视频影像；以及通过影音处理装置接收多媒体画面以及视频影像，并且根据多媒体画面以及视频影像输出合成影像。
[0009]基于上述，本专利技术的多媒体系统以及多媒体操作方法，可将多媒体画面以及视频影像合成，以输出具有沉浸式影音效果的合成影像，并且此合成影像中的多媒体画面部分可随着使用者通过第一携带式电子装置所提供的第一操作指令而对应改变，以达到改变现
Computer)、个人计算机(Personal Computer,PC)、笔记本电脑(Laptop PC)或平板计算机(Tablet PC)等，而本专利技术并不加以限制。协作装置110可包括处理装置(Processing Device)以及储存装置(Storing Device)。前述的处理装置可包括具有影像数据处理以及运算功能的中央处理单元(Central Processing Unit,CPU)，或是其他可编程的通用或专用的微处理器(microprocessor)、数字信号处理器(Digital Signal Processor,DSP)、图像处理器(Image Processing Unit,IPU)、图形处理器(Graphics Processing Unit,GPU)、可编程控制器、专用集成电路(Application Specific Integrated Circuits,ASIC)、可编程逻辑器件(Programmable Logic Device,PLD)、其他类似处理装置或这些装置的结合。前述的储存装置可为存储器(Memory)，例如动态随机存取存储器(Dynamic Random Access Memory,DRAM)、闪存(Flash memory)或非易失性随机存取存储器(Non
‑
Volatile Random Access Memory,NVRAM)等。前述的储存装置可储存多个多媒体画面数据、相关多媒体数据、多媒体处理程序以及操作指令等，以供前述的处理装置存取并执行之。
[0025]在本实施例中，影音处理装置120可通过有线或无线的方式连接协作装置110并与协作装置110通信，并且可通过有线或无线的方式连接摄影机140并与摄影机140通信。影音处理装置120可为独立的影音处理设备(Video and Audio Processing Device)，并且可具有如同前述协作装置110的处理装置以及储存装置所举例的装置内容，但是可与协作装置110具有不同类型的处理装置以及储存装置，对此本专利技术并不加以限制。然而，在一实施例中，协作装置110以及影音处理装置120可整合在同一个计算机主机中，以执行相关协作操作以及影音处理操作。在本实施例中，影音处理装置120可进行影像合成的操作，以将协作装置110以及摄影机140所提供的多媒体画面及视频影像进行合成，而输出具有沉浸式影音内容的合成影像104。
[0026]在本实施例中，携带式电子装置130可例如是力反馈手套、增强现实(Augmented Reality，AR)眼镜、智能型手机(Smart phone)、笔记本电脑(Laptop PC)或平板计算机(Tablet PC)等，且本专利技术并不限于此。携带式电子装置130可基于使用者的操作而输出相关操作指令至协作装置110。在本实施例中，摄影机140可为CMOS影像传感器(CMOS Image Sensor，CIS)或感光耦合元件(Charge Coupled Device，CCD)的摄影机。摄影机140可通过无线或有线的方式连接影音处理装置120并与影音处理装置120通信，以提供实时的视频影像103至影音处理装置120。另外，在一实施例中，多媒体系统100还可包括麦克风或其他音频捕获设备(未显示)，以同步于摄影机140来提供实时的音频数据至影音处理装置120。
[0027]图2是依照本专利技术的一实施例的多媒体操作方法的流程图。参考图1及图2，多媒体系统100可执行以下步骤S210～S240的多媒体操作。在本实施例中，使用者可操作携带式电子装置130。在步骤S210，携带式电子装置130提供操作指令101。在步骤S220，协作装置110接收操作指令101，并且提供多媒体画面102。协作装置110可根据操作指令101来执行相关多媒体程序或多媒体档案，以提供对应的多媒体画面102至影音处理装置120。在步骤S230，摄影机140提供视频影像103。在步骤S240，影音处理装置120接收多媒体画面102以及视频影像103，并且根据多媒体画面102以及视频影像103输出合成影像104。举例而言，摄影机140可拍摄使用者，以使摄影机140提供使用本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种多媒体系统，其特征在于，所述多媒体系统包括：第一携带式电子装置、协作装置、摄影机以及影音处理装置；所述第一携带式电子装置用于提供第一操作指令；所述协作装置耦接所述第一携带式电子装置，并且用于接收第一操作指令，其中所述协作装置提供多媒体画面，并且所述多媒体画面随着所述第一操作指令而改变；所述摄影机用于提供视频影像；以及所述影音处理装置耦接所述协作装置以及所述摄影机，并且用于接收所述多媒体画面以及所述视频影像，以根据所述多媒体画面以及所述视频影像输出合成影像。2.根据权利要求1所述的多媒体系统，其特征在于，所述多媒体画面包括投影片画面、图片、立体物品、网页画面、摄影机或影音串流装置产生的影像以及所述第一携带式电子装置的当前屏幕显示画面的至少其中之一。3.根据权利要求1所述的多媒体系统，其特征在于，所述影音处理装置还用于接收影像输入串流，并且根据所述多媒体画面、所述视频影像以及所述影像输入串流输出所述合成影像。4.根据权利要求1所述的多媒体系统，其特征在于，所述影音处理装置还用于将所述合成影像传送至视频会议服务器，以使所述视频会议服务器所提供的视频会议影音内容包括所述合成影像。5.根据权利要求1所述的多媒体系统，其特征在于，所述第一携带式电子装置包括触控显示屏幕，并且所述触控显示屏幕用于显示场景选择界面，其中所述场景选择界面包括多个场景选择，并且所述第一携带式电子装置根据所述场景选择界面的触控选择结果，以输出场景切换指令至所述协作装置，其中所述协作装置将所述场景切换指令提供至所述影音处理装置，以使所述影音处理装置根据所述场景切换指令来切换所述合成影像所显示的影像合成格式。6.根据权利要求1所述的多媒体系统，其特征在于，所述第一携带式电子装置包括触控显示屏幕，并且所述第一携带式电子装置用于根据所述触控显示屏幕的触控结果来输出画面操作指令至所述协作装置，以使所述协作装置根据所述画面操作指令来改变所述多媒体画面。7.根据权利要求1所述的多媒体系统，其特征在于，所述第一携带式电子装置包括加速度传感器，并且所述加速度传感器用于根据所述第一携带式电子装置的移动操作及转动操作的至少其中之一来输出另一画面操作指令至所述协作装置，以使所述协作装置根据所述另一画面操作指令来改变所述多媒体画面。8.根据权利要求1所述的多媒体系统，其特征在于，所述多媒体系统还包括：第二携带式电子装置，与所述第一携带式电子装置通信，并且用于提供第一权限要求指令至所述第一携带式电子装置，其中所述第一携带式电子装置根据所述第一权限要求指令产生第一同意指令，并且所述第一携带式电子装置根据所述第一权限要求指令以及所述第一同意指令将所述第二携带式电子装置所提供的第二操作指令提供至所述协作装置，以使所述多媒体画面随着所述第二操作指令而改变。9.根据权利要求8所述的多媒体系统，其特征在于，所述多媒体系统还包括：
第三携带式电子装置，与所述第一携带式电子装置通信，并且用于提供第二权限要求指令至所述第一携带式电子装置，其中所述第一携带式电子装置根据所述第二权限要求指令产生第二同意指令，并且所述第一携带式电子装置根据所述第二权限要求指令以及所述第二同意指令将所述第三携带式电子装置所提供的第三操作指令提供至所述协作装置，以使所述多媒体画面随着所述第三操作指令而改变，其中所述协作装置根据所述第一至所述第三操作指令的接收顺序来依序执行。10.根据权利要求8所述的多媒体系统，其特征在于，所述多媒体系统还包括：第三携带式电子装置，与所述第二携带式电子装置通信，并且用于提供第三权限要求指令至所述第二携带式电子装置，其中所述第二携带式电子装置根据所述第三权限要求指令产生第三同意指令，并且所述第二携带式电子装置根据所述第三权限要求指令以及第三同意指令将所述第三携带式电子装置所提供的第四操作指令提供至所述协作装置，以使所述多媒...

【专利技术属性】
技术研发人员：王文泰，张盛峰，
申请(专利权)人：奥图码股份有限公司，
类型：发明
国别省市：