一种基于目标检测的轨道自动点击按压装置及方法制造方法及图纸

本发明专利技术提供一种基于目标检测的轨道自动点击按压装置及方法，涉及自动化控制技术领域，包括：工作面板、与工作面板固定安装的至少一条纵向导轨，与纵向导轨滑动连接的至少一条横向导轨，横向导轨上滑动连接有点击按压器；纵向导轨、横向导轨和点击按压器均连接有步进电机，所有步进电机均连接点击控压计算控制器；工作面板上方还安装有摄像拍照设备，点击控压计算控制器、摄像拍照设备均与控制设备相连；控制设备中安装有点击按压控制软件和目标检测软件。本发明专利技术实现了点击按压器在横纵方向的任意移动，实现了任意按键设备或装置的单点或多点连续点击按压，通过目标检测实现了需点击按压设备在工作面板上的任意摆放，提高了智能化自动化水平。能化自动化水平。能化自动化水平。

【技术实现步骤摘要】
一种基于目标检测的轨道自动点击按压装置及方法


[0001]本专利技术涉及自动化控制
，尤其涉及一种基于目标检测的轨道自动点击按压装置及方法。

技术介绍

[0002]当前，在数智化应用落地过程中，自动点击按压已经在越来越多的自动化场景中得到了应用。自动点击按压主要有两种方式，一种是通过软件程序模拟人工操作方式点击按压系统、应用或软件等上的按钮、文本、链接等的方法；一种是单点固定位置物理点击按压装置(多点需多个物理装置，固定多个位置)，通过软件程序触发控制点击按压物理按键的方法。
[0003]软件程序模拟人工点击按压在RPA流程机器人、软件UI自动化测试等领域有着大量的应用。单点固定位置物理点击按压装置则是在无法通过软件程序模拟点击按压，或者是在软件程序模拟硬件点击按压被系统屏蔽掉的情况下，实现物理点击按压，比如在网银RPA机器人的应用中，就会涉及到U盾确认键、OK键等自动点击和按压，固定U盾确认键或OK键位置，通过软件程序调用触发实现自动物理点击按压。
[0004]现有基于单点固定位置物理点击按压的方法、装置或产品，在进行调本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种基于目标检测的轨道自动点击按压装置，其特征在于，包括：工作面板和与所述工作面板固定安装的至少一条纵向导轨，所述工作面板上方与所述纵向导轨滑动连接的至少一条横向导轨，所述横向导轨上滑动连接有点击按压器，所述工作面板上放置需点击按压设备；所述纵向导轨、横向导轨和点击按压器各自连接有步进电机，所有所述步进电机均连接点击控压计算控制器；所述点击控压计算控制器与控制设备相连；所述工作面板上方还安装有摄像拍照设备，所述摄像拍照设备与控制设备相连；所述控制设备中安装有点击按压控制软件和目标检测软件；所述摄像拍照设备拍摄所述工作面板及其上放置的需点击按压设备，通过目标检测软件获取需点击按压设备中所有按键的按键坐标；所述点击按压控制软件根据接收到的需点击按键，基于摄像拍照设备获取的所有按键的按键坐标获取需点击按键的按键坐标，生成移动控制指令并发送所述点击控压计算控制器；所述点击控压计算控制器基于所述需点击按键的按键坐标控制所述纵向导轨、横向导轨的步进电机依次移动至各所述需点击按键位置，控制所述点击按压器的步进电机实现对该需点击按键的点击按压。2.根据权利要求1所述的基于目标检测的轨道自动点击按压装置，其特征在于：所述纵向导轨包括两条，分别安装在所述工作面板的两端，所述横向导轨两端部分别安装在两所述纵向导轨上。3.根据权利要求1或2所述的基于目标检测的轨道自动点击按压装置，其特征在于：所述横向导轨端部设有滑动滚轮，所述横向导轨通过所述滑动滚轮与所述纵向导轨滑动连接。4.根据权利要求1所述的基于目标检测的轨道自动点击按压装置，其特征在于：所述摄像拍照设备包括一个或多个，拍摄所述需点击按压设备当前在工作面板上的图片，拍摄的图片大小与工作面板大小相同。5.根据权利要求1所述的基于目标检测的轨道自动点击按压装置，其特征在于：所述点击按压器与其连接的所述步进电机共同通过滑动滚轮连接在所述横向导轨上。6.一种应用如权利要求1～5任一项所述的基于目标检测的轨道自动点击按压装置的方法，其特征在于，包括：通过摄像拍照设备获取所述需点击按压设备上所有按键的...

【专利技术属性】
技术研发人员：唐永，黄颖志，符传运，王冻，
申请(专利权)人：北财在线科技北京有限公司，
类型：发明
国别省市：