远程控制方法、装置、操作终端、控制设备和存储介质制造方法及图纸

本申请公开了远程控制方法、装置、操作终端、控制设备和存储介质，涉及自然语言处理、计算机视觉和智能硬件控制技术领域。具体实现方案为：获取第一设备显示屏的拍摄数据，根据拍摄数据展示显示画面，在接收到用户操作的情况下，在显示画面中确定用户操作的第一操作位置，根据用户操作的触控持续时间和/或触控轨迹，确定用户操作的操作类型，根据第一操作位置和用户操作的操作类型，控制第二设备在第一设备对应的第二操作位置上，依据操作类型执行用户操作，通过被控设备外置的摄像头等装置，无需在被控设备内部运行远程控制软件，同时在被控设备系统状态异常的情况下，仍可实现远程控制，提高了远程控制的可靠性。提高了远程控制的可靠性。提高了远程控制的可靠性。

【技术实现步骤摘要】
远程控制方法、装置、操作终端、控制设备和存储介质


[0001]本申请涉及人工智能
，尤其涉及自然语言处理、计算机视觉和智能硬件控制
，具体涉及远程控制方法、装置、操作终端、控制设备和存储介质。

技术介绍

[0002]在日常工作、生活中有很多场景中需要远程操作手机、电脑、车机屏幕等智能设备，更需要我们具备这种远程控制的能力，使得远程协助、远程办公等成为可能。同时，在不同场景和环境下，均需要实现远程控制。
[0003]因此，如何提高远程控制的可靠性是亟待解决的问题。

技术实现思路

[0004]本申请提供了一种远程控制方法、装置、操作终端、控制设备和存储介质，提高了远程控制的可靠性。
[0005]根据本申请的一方面，提供了一种远程控制方法，包括以下步骤：
[0006]获取第一设备显示屏的拍摄数据；
[0007]根据所述拍摄数据，展示显示画面；
[0008]在接收到用户操作的情况下，在所述显示画面中确定所述用户操作的第一操作位置；
[0009]根据所述用户操作的触控持续时间和/或触控轨迹，确定所述用户操作的操作类型；
[0010]根据所述第一操作位置和所述用户操作的操作类型，控制所述第二设备在所述第一设备对应的第二操作位置上，依据所述操作类型执行操作。
[0011]根据本申请的另一方面，提供了一种远程控制方法，包括以下步骤：
[0012]控制图像采集设备对第一设备的显示屏进行拍摄，以得到拍摄数据；
[0013]将所述拍摄数据发送至操作终端以展示显示画面；
[0014]根据所述操作终端探测到的用户操作在所述显示画面中的第一操作位置，以及所述用户操作的类型，控制所述第二设备在所述第一设备对应的第二操作位置上，依据所述操作类型执行操作。
[0015]根据本申请的另一方面，提供了一种远程控制装置，包括：
[0016]获取模块，用于获取第一设备显示屏的拍摄数据；
[0017]展示模块，用于根据所述拍摄数据，展示显示画面；
[0018]第一确定模块，用于在接收到用户操作的情况下，在所述显示画面中确定所述用户操作的第一操作位置；
[0019]第二确定模块，用于根据所述用户操作的触控持续时间和/或触控轨迹，确定所述用户操作的操作类型；
[0020]控制模块，用于根据所述第一操作位置和所述用户操作的操作类型，控制所述第
二设备在所述第一设备对应的第二操作位置上，依据所述操作类型执行操作。
[0021]根据本申请的另一方面，提供了另一种远程控制装置，包括：
[0022]第一控制模块，用于控制图像采集设备对第一设备的显示屏进行拍摄，以得到拍摄数据；
[0023]发送模块，用于将所述拍摄数据发送至操作终端以展示显示画面；
[0024]第二控制模块，用于根据所述操作终端探测到的用户操作在所述显示画面中的第一操作位置，以及所述用户操作的类型，控制所述第二设备在所述第一设备对应的第二操作位置上，依据所述操作类型执行操作。
[0025]根据本申请的另一方面，提供了一种操作终端，包括：
[0026]至少一个处理器；以及
[0027]与所述至少一个处理器通信连接的存储器；其中，
[0028]所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行前述一方面所述的方法。
[0029]根据本申请的另一方面，提供了一种控制设备，包括：
[0030]至少一个处理器；以及
[0031]与所述至少一个处理器通信连接的存储器；其中，
[0032]所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行另一方面所述的方法。
[0033]根据本申请的另一方面，提供了一种远程控制系统，包括：
[0034]至少一如前述一方面所述的操作终端；
[0035]至少一如前述一方面所述的控制设备；
[0036]其中，所述控制设备与图像采集设备和第二设备连接；
[0037]所述图像采集设备，用于对第一设备的显示屏进行拍摄；
[0038]所述第二设备，设置于第一设备外部，用于对所述第一设备模拟执行用户操作。
[0039]根据本申请的另一方面，提供了一种存储有计算机指令的非瞬时计算机可读存储介质，其中，所述计算机指令用于使所述计算机执行根据上述实施例所述的方法的步骤。
[0040]根据本申请的另一方面，提供了一种计算机程序产品，包括计算机程序，所述计算机程序在被处理器执行时实现上述实施例所述方法的步骤。
[0041]应当理解，本部分所描述的内容并非旨在标识本申请的实施例的关键或重要特征，也不用于限制本申请的范围。本申请的其它特征将通过以下的说明书而变得容易理解。
附图说明
[0042]附图用于更好地理解本方案，不构成对本申请的限定。其中：
[0043]图1为本申请实施例提供的一种远程控制方法的流程示意图；
[0044]图2为本申请实施例提供的另一种远程控制方法的流程示意图；
[0045]图3为本申请实施例提供的另一种远程控制方法的流程示意图；
[0046]图4为本申请实施例提供的另一种远程控制方法的流程示意图；
[0047]图5为本申请实施例提供的另一种远程控制方法的流程示意图；
[0048]图6为本申请实施例提供的另一种远程控制方法的流程示意图；
[0049]图7为本申请实施例提供的一种远程控制系统的结构示意图；
[0050]图8为本申请实施例提供的另一种远程控制系统的结构示意图；
[0051]图9为本申请实施例提供的一种远程控制装置的结构示意图；
[0052]图10为本申请实施例提供的另一种远程控制装置的结构示意图；
[0053]图11为本申请的实施例提供的示例操作终端的结构框图。
具体实施方式
[0054]以下结合附图对本申请的示范性实施例做出说明，其中包括本申请实施例的各种细节以助于理解，应当将它们认为仅仅是示范性的。因此，本领域普通技术人员应当认识到，可以对这里描述的实施例做出各种改变和修改，而不会背离本申请的范围和精神。同样，为了清楚和简明，以下的描述中省略了对公知功能和结构的描述。
[0055]下面参考附图描述本申请实施例的远程控制方法、装置、操作终端、控制设备和存储介质。
[0056]图1为本申请一实施例提供的远程控制方法的流程示意图。
[0057]本申请实施例的远程控制方法，可以由本申请实施例的操作终端执行，该装置可以配置于操作终端中，其中，操作终端可以为任一具有计算能力的设备，例如可以为个人电脑、移动终端、服务器等，移动终端例如可以为车载设备、手机、平板电脑、个人数字助理、穿戴式设备等具有各种操作系统、触摸屏和/或显示屏本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种远程控制方法，包括以下步骤：获取第一设备显示屏的拍摄数据；根据所述拍摄数据，展示显示画面；在接收到用户操作的情况下，在所述显示画面中确定所述用户操作的第一操作位置；根据所述用户操作的触控持续时间和/或触控轨迹，确定所述用户操作的操作类型；根据所述第一操作位置和所述用户操作的操作类型，控制所述第二设备在所述第一设备对应的第二操作位置上，依据所述操作类型执行操作。2.根据权利要求1所述的方法，其中，所述根据所述第一操作位置和所述用户操作的操作类型，控制所述第二设备在所述第一设备对应的第二操作位置上，依据所述操作类型执行操作，包括：根据所述用户操作的操作类型，确定对应的目标事件标识；根据所述第一操作位置在所述显示画面中的相对位置，确定所述第一操作位置的第一位置坐标；根据所述目标事件标识和所述第一位置坐标，生成第一指示信息；向服务器发送所述第一指示信息，其中，所述第一指示信息，用于指示所述服务器向所述第二设备的控制设备发送对应的第二指示信息，所述第二指示信息包括所述目标事件标识，以及所述第一位置坐标对应的第二位置坐标，所述第二位置坐标用于指示所述第一设备的显示屏中的所述第二操作位置。3.根据权利要求2所述的方法，其中，所述根据所述第一操作位置在所述显示画面中的相对位置，确定所述第一操作位置的第一位置坐标，包括：对所述显示画面进行边框识别，以从所述显示画面中确定与所述第一设备的显示屏对应的目标区域；基于所述目标区域建立第一图像坐标系，其中，所述第一图像坐标系以所述目标区域中默认位置为坐标原点，以所述目标区域的至少一边距离所述坐标原点的距离为单位长度；在所述第一图像坐标系中，确定所述第一操作位置的所述第一位置坐标。4.根据权利要求1所述的方法，其特征在于，所述根据所述第一操作位置和所述用户操作的操作类型，控制所述第二设备在所述第一设备对应的第二操作位置上，依据所述操作类型执行操作，包括：根据所述用户操作的操作类型，确定对应的目标事件标识；根据所述第一操作位置在所述显示画面中的相对位置，以及所述第一设备的显示屏尺寸，确定所述第二操作位置在所述第一设备的显示屏上的第三位置坐标；根据所述目标事件标识和所述第三位置坐标，生成第三指示信息；通过所述服务器向所述第二设备的控制设备发送所述第三指示信息。5.根据权利要求4所述的方法，其特征在于，所述根据所述第一操作位置在所述显示画面中的相对位置，以及所述第一设备的显示屏尺寸，确定对应的所述第二操作位置在所述第一设备的显示屏上的第三位置坐标，包括：对所述显示画面进行边框识别，以从所述显示画面中确定与所述第一设备的显示屏对应的目标区域；
根据所述第一操作位置在所述显示画面中的相对位置，确定所述第一操作位置在所述目标区域中的相对位置；根据所述第一操作位置在所述目标区域中的相对位置，以及所述第一设备的显示屏尺寸，确定对应的所述第二操作位置在所述第一设备的显示屏上的第三位置坐标。6.根据权利要求1
‑
5任一项所述的方法，其中，所述方法还包括：向服务器发送远程控制请求；其中，所述远程控制请求，用于触发所述服务器从多台候选终端中确定空闲的所述第一设备，以及启动所述第一设备对应的所述第二设备。7.一种远程控制方法，包括以下步骤：控制图像采集设备对第一设备的显示屏进行拍摄，以得到拍摄数据；将所述拍摄数据发送至操作终端以展示显示画面；根据所述操作终端探测到的用户操作在所述显示画面中的第一操作位置，以及所述用户操作的类型，控制所述第二设备在所述第一设备对应的第二操作位置上，依据所述操作类型执行操作。8.根据权利要求7所述的方法，其中，所述根据所述操作终端探测到的用户操作在所述显示画面中的第一操作位置，以及所述用户操作的类型，控制所述第二设备在所述第一设备对应的第二操作位置上，依据所述操作类型执行操作，包括：接收服务器发送的指示信息；其中，所...

【专利技术属性】
技术研发人员：李金刚，
申请(专利权)人：阿波罗智联北京科技有限公司，
类型：发明
国别省市：