网络交互环境下视频、音频、控制同步的方法技术

网络交互环境下视频、音频、控制同步的方法。在网络视频交互状态下双方计算机通过声卡的输入或输出端分别与各自的控制板连接，由控制板内按键、开关量输入控制电路、模拟转换电路接收通过按键输入或由模拟、开关量传感器产生控制对方的信息，经控制板处理转换成ＤＴＭＦ控制代码，通过模拟开关插入音频的Ｒ声道或Ｌ声道中与ＵＳＢ摄象头获得的视频信号一起同步转换成流媒体即控制代码插入流媒体方式，经计算机网络接ＩＮＴＥＲＮＥＴ传输，控制对方与控制板连接的各类继电器、可控硅和各类模拟量执行元件，或通过红外线输出电路遥控外部设备。本发明专利技术可广泛运用在网络游戏、中低速远程控制领域、远程家庭医疗监控、远程交互教学等领域。

【技术实现步骤摘要】

-本专利技术涉及一种将控制代码插入流媒体通过计算机网络进行交互控制对 方硬件或设备，实现视频、音频与控制同步的基于网络视频交互环境下控制 对方硬件或设备的方法。
技术介绍
现有技术大都采用WINDOWS XP提供的单向远程协助功能或其它单向 远程控制软件，上述方法对系统外硬件和设备进行控制比较困难，无法实现 交互双方视频、音频和硬件控制的同步，其他远程控制方式需要计算机硬件 和软件资源；即系统驱动、接口驱动、应用程序等和I/O接口硬件和其它相 关硬件，对于一般专业人员安装、调试比较麻烦、开发周期长、系统的通用 性差，系统的造价高，普通用户实现和使用比较困难。
技术实现思路
本专利技术的目的是提供一种基于网络视频交互环境下将控制代码插入流媒 体的方式，同步控制交互对方硬件或设备，实现视频、音频和控制同步的方法。上述的目的通过以下的技术方案实现-一种，在网络视频交互状 态下双方计算机通过声卡的输入或输出端分别与各自的控制板连接，由控制 板内按键、开关量输入控制电路、模拟转换电路接收通过按键输入或由模拟、 开关量传感器产生控制对方的信息，经控制板处理转换成DTMF控制代码， 通过模拟开关插入音频的R声道或L声道中与USB摄象头获得的视频信号一 起同步转换成流媒体即控制代码插入流媒体方式，经计算机网络接 INTERNET传输，控制对方与控制板连接的各类继电器、可控硅和各类模拟 量执行元件，或通过红外线输出电路遥控外部设备。这个技术方案有以下有益效果l.本专利技术的技术方案硬件结构简单造价低廉；应用软件开发简单方便、周 期短；不占用系统接口资源，无需驱动；同步性优于现有技术。2.本专利技术技术一般人员便可安装、调试、使用；通用性强，只需开发简单 的应用软件便可方便地在移动领域中的手机、PDA(掌上电脑)中应用；或通过对硬件的一些小改动在有线电话通讯系统的可视电话领域应用。附图说明附图1是本专利技术控制代码时序图；附图2是本专利技术交互双方系统连接示意图；附图3是本专利技术各部分结构连接图；附图4是本专利技术方法的控制卡1的电路结构示意图；附图5是专利技术方法的工作流程图。附图中各部分说明1控制板1. 1单片机系统1. 2控制数据存储1.3状态显示电路(LED)1.4红外线输出电路(38k载波的红外线遥控信号驱动、输出电路)1.5 DTMF编译码电路 1. 5-1 DTMF编译码器 1.5-2 DTMF码输出1.5- 3 DTMF码输入1.6 DTMF/音频切换电路1.6- 1音频R信号输出(接喇叭) 1.6-2音频R信号输入/DTLM信号输入 1.6-3音频L信号输出(接喇叭) 1.6-4音频L信号输入1.6-5音频L信号输出 1.6-6话筒R信号输出/DTMF输出 1.6-7话筒R信号输入(接话筒) 1.6-8话筒L信号输入(接话筒) 2输入/输出电路2.1 A/D转换、预处理电路(温度/压力…等模拟量传感器的控制电路) 2.2按键、开关量输入控制电路(连接各类开关、按键、开关量传感器) 2.3开关量隔离、驱动电路(接连各类继电器、可控硅等驱动元件) 2.4 D/A隔离、驱动电路(接连各类模拟量执行元件) 3计算机 3. 1 USB接口 3. 2接INTERNET 3.3声卡喇叭R信号输出 3.4声卡喇叭L信号输出 3. 5声卡立体声话筒R信号输入 3. 6声卡立体声话筒L信号输入 4喇叭或耳机 5立体声话筒 6 USB摄像头 本专利技术的具体实施例方式实施例l:，(网络视频交互环境是指网络视频聊天、交互式网络课程、网络视频会议等状态)如图1、 2、 3、 4、 5 所示。交互双方控制板1的控制信号\音频信号R 1.6-6与计算机3声卡的 立体声话筒输入R 3.5连接，控制信号通过声卡输出R 3.3 (喇叭R声道/或 L声道或线路输出R声道/或L声道)；声卡喇叭输出L 3. 4进入控制板1的音 频R信号输入端1. 6-2，在网络视频交互状态下，交互一方计算机3连接的控 制板1由输入/输出电路2的A/D转换、预处理电路2. 1，通过模拟传感器获 取的模拟量信息，和开关量输入控制电路2.2通过按键或开关量传感器获取 的开关量信息，通过单片机系统1. 1控制下的DTMF编译码电路1. 5转换成4 位DTMF编码信号,通过DTMF/音频切换电路1. 6切换,经话筒R信号输出/DTMF 输出1. 6-6插入与计算机话筒输入端3. 5连接的R (右)声道，同时将话筒R (右)声道话筒R信号输入端1.6-7输出信号切换至L (左)声道(保证在控 制信号传输过程中本地声音信号的正常输出)，当这一过程结束，控制板l回到初试状态。这样控制信号与本机的音频信号及USB摄象机获得的视频信号 经计算机3处理转换为同步的流媒体信号，通过网络同步传送至交互的另一 方，实现视频信号、音频信号、控制信号的同步。由交互另一方计算机3收 到通过网络传入的流媒体信号，分离出包含有控制代码的音频信号，通过计 算机3声卡喇叭输出R 3.3进入控制板1的音频R声道输入/DTLM信号输入 端1.6-2，由单片机系统1.1控制下的DTMF编译码电路1.5译码和单片机系 统1.1的处理转换成控制信号，通过与输入/输出电路2连接的开关量隔离、 驱动电路2.3接连放各类继电器、可控硅等驱动各类开关量执行元件和D/A 隔离、驱动电路2. 4接连各类模拟量执行元件或通过红外线输出电路1.4用红 外线方式控制具有红外遥控功能的电器设备。同时将音频R信号输出1.6-1 信号切换至音频L (左)信号输出端1.6-3，保证在控制信号接收过程中二个 喇叭输出音频信号，当这一过程结束，控制板1系统回到初始状态。 实施例2:，如图l、 2、 3、 4、 5所示， 网络视频交互双方计算机3声卡喇叭的R、 L输出端3.3、 3.4 (或线路输出端) 通过连接电缆分别与控制板1的音频R信号输入/DTLM信号输入1.6-2、音频L 信号输入1.6-4连接，立体声话筒R声道输入端3.5/L声道输入端3.6分别与控 制板1话筒L信号输出1.6-5、话筒R信号输出1.6-6连接，外接喇叭或耳机4的 R声道/L声道输入端和外接立体声话筒R声道/L声道输出端分别与控制板1的 音频R信号输出端1.6-1、音频L信号输出端1.6-3和话筒R信号输入端1.6-7、 话筒L信号输入端1.6-8连接。网络视频交互环境下控制交互对方硬件和电器设备的控制板有3种状态， 即初始状态、主控状态、被控状态。初始状态，从计算机3声卡喇叭输出端R声道3.3/和输出端L声道3.4输 出的音频信号进入控制板1 DTMF/音频切换电路1.6的音频R信号输入端1.6-2 和音频L信号输入端1.6-4，在单片机系统1.1 P1.6端口控制下DTMF/音频切换 电路1.6的SW1的状态为保持音频R信号输出端1.6-1与音频R信号输入1.6-2 连接；音频L信号输入端1.6-4与音频L信号输出端1.6-3直接连接；计算机3 的R声道/L声道音频信号通过音频R信号输出端1.6-1/音频L信号输出端1.6-进入外接喇叭或耳机4。立体声话筒5的R声道/L声道输出信号进入DTMF/ 音频信号切换电路1.6的话筒5的R信号输入端1.6-7/话筒L信号输入端1.6-8, 在本文档来自技高网...

【技术保护点】
一种网络交互环境下视频、音频、控制同步的方法，其特征是：在网络视频交互状态下双方计算机通过声卡的输入或输出端分别与各自的控制板连接，由控制板内按键、开关量输入控制电路、模拟转换电路接收通过按键输入或由模拟、开关量传感器产生控制对方的信息，经控制板处理转换成ＤＴＭＦ控制代码，通过模拟开关插入音频的Ｒ声道或Ｌ声道中与ＵＳＢ摄象头获得的视频信号一起同步转换成流媒体即控制代码插入流媒体方式，经计算机网络接ＩＮＴＥＲＮＥＴ传输，控制对方与控制板连接的各类继电器、可控硅和各类模拟量执行元件，或通过红外线输出电路遥控外部设备。

【技术特征摘要】
1.一种网络交互环境下视频、音频、控制同步的方法，其特征是在网络视频交互状态下双方计算机通过声卡的输入或输出端分别与各自的控制板连接，由控制板内按键、开关量输入控制电路、模拟转换电路接收通过按键输入或由模拟、开关量传感器产生控制对方的信息，经控制板处理转换成D...

【专利技术属性】
技术研发人员：张金傲，严复铁，张天华，
申请(专利权)人：黑龙江大学，黑龙江黑大高新科技产业有限公司，
类型：发明
国别省市：93[中国|哈尔滨]