唯一性控件区域定位模型训练与定位方法、装置和设备制造方法及图纸

本发明专利技术涉及人工智能领域，提供一种唯一性控件区域定位模型训练与定位方法、装置和设备，训练方法包括：获取初始策略网络，以及包含目标控件区的第一界面图像；将目标控件区的第一状态信息、第一定位信息、第一定位信息的奖励以及目标划定区的第二状态信息作为一组训练数据；基于多组训练数据，采用强化学习方法对初始策略网络进行参数迭代直至满足迭代终止条件，并将完成参数迭代后的初始策略网络作为控件区域定位模型。本发明专利技术提供的唯一性控件区域定位模型训练与定位方法、装置和设备，利用交互截图的方式获取多组训练数据，从而可以省去数据标注过程，能够自动截取到具有唯一识别性且包含目标控件区的控件区域，提高自动化测试脚本的编写效率。

【技术实现步骤摘要】

本专利技术涉及人工智能，尤其涉及一种唯一性控件区域定位模型训练与定位方法、装置和设备。

技术介绍

1、在基于图像识别的自动化测试工具(例如airtest)应用过程中，一个测试用例自动化测试脚本的形成，需要截取测试的用户界面(user interface，ui)内涉及的控件区域图像。

2、相关技术中，基于监督学习的模型训练方法，需要大量的标注数据，然而数据标注工作量较大，严重降低了模型的训练效率。

技术实现思路

1、本专利技术提供一种唯一性控件区域定位模型训练与定位方法、装置和设备，用以解决现有技术中数据标注工作量较大，严重降低了模型的训练效率的缺陷。

2、本专利技术提供一种唯一性控件区域定位模型训练方法，包括：

3、获取初始策略网络，以及包含目标控件区的第一界面图像；

4、基于所述目标控件区在所述第一界面图像中的位置信息和唯一性信息，以及所述目标控件区的图像特征，确定所述目标控件区的第一状态信息；所述唯一性信息表征所述目标控件区在所述第一界面图像中是否具备唯一识本文档来自技高网...

【技术保护点】

1.一种唯一性控件区域定位模型训练方法，其特征在于，包括：

2.根据权利要求1所述的唯一性控件区域定位模型训练方法，其特征在于，所述基于所述目标控件区的第一状态信息和所述初始策略网络，确定第一定位信息，包括：

3.根据权利要求1所述的唯一性控件区域定位模型训练方法，其特征在于，所述基于所述目标控件区在所述第一界面图像中的位置信息和唯一性信息，以及所述目标控件区的图像特征，确定所述目标控件区的第一状态信息，包括：

4.根据权利要求1所述的唯一性控件区域定位模型训练方法，其特征在于，所述基于所述目标划定区在所述第一界面图像中的位置信息和唯一性信息，确定所述...

【技术特征摘要】

1.一种唯一性控件区域定位模型训练方法，其特征在于，包括：

2.根据权利要求1所述的唯一性控件区域定位模型训练方法，其特征在于，所述基于所述目标控件区的第一状态信息和所述初始策略网络，确定第一定位信息，包括：

3.根据权利要求1所述的唯一性控件区域定位模型训练方法，其特征在于，所述基于所述目标控件区在所述第一界面图像中的位置信息和唯一性信息，以及所述目标控件区的图像特征，确定所述目标控件区的第一状态信息，包括：

4.根据权利要求1所述的唯一性控件区域定位模型训练方法，其特征在于，所述基于所述目标划定区在所述第一界面图像中的位置信息和唯一性信息，确定所述第一定位信息的奖励，包括：

5.根据权利要求4所述的唯一性控件区域定位模型训练方法，其特征在于，所述基于所述目标划定区在所述第一界面图像中的唯一性信息，以及所述目标划定区的长高与所述目标控件区的长高的比值，确定所述第一定位信息的奖励，包括：

6.根据权利要求1至5中任一项所述的唯一性控件区域定位模型训练方法，其特征在于，所...

【专利技术属性】
技术研发人员：张辉，吴正中，李月强，刘喆，王晓东，张东东，邓能文，
申请(专利权)人：北京城建智控科技股份有限公司，
类型：发明
国别省市：