页面元素定位方法、装置、计算机设备和存储介质制造方法及图纸

技术编号:37059047 阅读:19 留言:0更新日期:2023-03-29 19:35
本申请提供了一种页面元素定位方法、装置。该方法包括:获取待匹配图像和测试页面图像;提取待匹配图像中的特征点,得到第一特征点集合,提取测试页面图像中的特征点,得到第二特征点集合;遍历第一特征点集合中的所有特征点,每遍历到第一特征点集合的一个特征点,根据相似度阈值确定第二特征点集合中是否存在与该特征点对应的匹配特征点,若是,则以该特征点和对应的匹配特征点为一对匹配点对;在对第一特征点集合遍历完成后,当匹配点对的数量小于预设数量时,调整相似度阈值并返回遍历第一特征点集合中的所有特征点的步骤,直至匹配点对的数量大于或等于预设数量;根据各匹配点对,定位待匹配图像。该方法不依赖人工调参,效率和准确性高。效率和准确性高。效率和准确性高。

【技术实现步骤摘要】
页面元素定位方法、装置、计算机设备和存储介质


[0001]本申请涉及互联网
,尤其涉及一种页面元素定位方法、装置、计算机设备和存储介质。

技术介绍

[0002]随着web应用程序的版本更新,需要对web应用程序的UI(User Interface,用户界面)界面进行测试。目前可以通过一定的自动化测试框架实现UI自动化测试。在自动化测试过程中,可以通过图像匹配的方式,以待定位的页面元素为模板与UI界面进行匹配,从而识别待定位的页面元素在UI界面中的位置,以对待定位的页面元素进行自动化操作。传统技术中的图像匹配方式效率和准确性较低,容易出现误匹配。

技术实现思路

[0003]本申请的目的旨在至少能解决上述的技术缺陷之一,特别是现有技术中测试用例编写效率较低的技术缺陷。
[0004]第一方面,本申请提供了一种页面元素定位方法,包括:
[0005]获取待匹配图像和测试页面图像;
[0006]提取待匹配图像中的特征点,得到第一特征点集合,提取测试页面图像中的特征点,得到第二特征点集合;
[0007]遍历第一特征点集合中的所有特征点,每当遍历到第一特征点集合中的一个特征点时,根据相似度阈值确定第二特征点集合中是否存在与该特征点对应的匹配特征点,若是,则以该特征点和对应的匹配特征点为一对匹配点对;其中,匹配点对中两个特征点的相似度大于相似度阈值;
[0008]在对第一特征点集合遍历完成后,当匹配点对的数量小于预设数量时,调整相似度阈值并返回遍历第一特征点集合中的所有特征点的步骤,直至匹配点对的数量大于或等于预设数量;
[0009]根据匹配点对的数量大于或等于预设数量时的各匹配点对,确定待匹配图像在测试页面图像中的位置。
[0010]在其中一个实施例中,在第一次对第一特征点集合进行遍历前还包括:
[0011]获取第一特征点集合中特征点的数量;
[0012]根据数量设定第一次对第一特征点集合进行遍历时的相似度阈值;其中,数量越大,则数量对应的相似度阈值越大。
[0013]在其中一个实施例中,调整相似度阈值包括:
[0014]将相似度阈值降低固定值。
[0015]在其中一个实施例中,第一特征点集合或第二特征点集合中的特征点为尺度不变特征变换特征点或快速鲁棒特征特征点。
[0016]在其中一个实施例中,根据匹配点对的数量大于或等于预设数量时的各匹配点
对,确定待匹配图像在测试页面图像中的位置,包括:
[0017]计算匹配点对的数量大于或等于预设数量时的各匹配点对中的匹配特征点的中心点坐标,根据中心点坐标确定待匹配图像在测试页面图像中的位置。
[0018]第二方面,本申请提供了一种页面元素定位装置,包括:
[0019]图像获取模块,用于获取待匹配图像和测试页面图像;
[0020]特征点提取模块,用于提取待匹配图像中的特征点,得到第一特征点集合,提取测试页面图像中的特征点,得到第二特征点集合;
[0021]遍历模块,用于遍历第一特征点集合中的所有特征点,每当遍历到第一特征点集合中的一个特征点时,确定第二特征点集合中是否存在与该特征点对应的匹配特征点,若是,则以该特征点和对应的匹配特征点为一对匹配点对;其中,目标特征点与对应的匹配特征点的相似度大于相似度阈值;
[0022]相似度阈值调整模块,用于在对第一特征点集合遍历完成后,当匹配点对的数量小于预设数量时,调整相似度阈值并返回遍历第一特征点集合中的所有特征点的步骤,直至匹配点对的数量达到预设数量;
[0023]定位模块,用于根据匹配点对的数量大于或等于预设数量时的各匹配点对,确定待匹配图像在测试页面图像中的位置。
[0024]在其中一个实施例中,装置还包括预设相似度阈值模块,预设相似度阈值模块用于获取第一特征点集合中特征点的数量;根据数量设定第一次对第一特征点集合进行遍历时的相似度阈值;其中,数量越大,则数量对应的相似度阈值越大。
[0025]在其中一个实施例中,相似度阈值调整模块用于将相似度阈值降低固定值。
[0026]第三方面,本申请实施例提供了一种存储介质,其特征在于:存储介质中存储有计算机可读指令,计算机可读指令被一个或多个处理器执行时,使得一个或多个处理器执行如上述任一实施例中的页面元素定位方法的步骤。
[0027]第四方面,本申请实施例提供了一种计算机设备,包括:一个或多个处理器,以及存储器;
[0028]存储器中存储有计算机可读指令,计算机可读指令被一个或多个处理器执行时,执行如上述任一实施例中的页面元素定位方法的步骤。
[0029]从以上技术方案可以看出,本申请实施例具有以下优点:
[0030]基于上述任一实施例,将待匹图像对应的第一特征点集合与测试页面图像对应的第二特征点集进行匹配。根据匹配所得到的匹配点对的数量确定当前的相似度阈值是否需要调整。若匹配点对的数量较少,则应对相似度阈值进行调整,直至匹配点对的数量大于或等于预设数量,即将相似度阈值调整得较为合适。利用根据较为合理的相似度阈值所确定出的一组匹配点对即可对待匹配图像进行精准定位。该方法不需要人工调整相似度阈值,大大提高了定位的效率。也摆脱了人工调参对经验的依赖,客观地确定出合理的相似度阈值,保证定位准确性。
附图说明
[0031]为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本
申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其它的附图。
[0032]图1为本申请一个实施例提供的页面元素定位方法的流程示意图;
[0033]图2为本申请一个实施例中页面元素定位装置的模块结构图;
[0034]图3为本申请一个实施例中计算机设备的内部结构图。
具体实施方式
[0035]下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
[0036]传统技术中通过特征点匹配的方式是计算分属不同图像的两个特征点之间的相似度(相似度越大,则两个特征点越相似),当该相似度大于相似度阈值时,即确定这两个特征点为一对匹配点对。当两个图像之间匹配点对的数量大于一定数值时,即确定这两个图像匹配。该方式中,相似度阈值的选取将对匹配准确性有较大影响。将相似度阈值选择过大,则可能误判测试页面中没有待匹配图像对应的页面元素。将相似度阈值选择过小,则可能将与待匹配图像对应的页面元素不相似的区域也纳入考虑。因此,将需要人工调整相似度阈值,既影响效率又因为人工主观性而影响准确性,导致常常出现误匹配的现象。
[0037]第一方面本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种页面元素定位方法,其特征在于,包括:获取待匹配图像和测试页面图像;提取所述待匹配图像中的特征点,得到第一特征点集合,提取所述测试页面图像中的特征点,得到第二特征点集合;遍历所述第一特征点集合中的所有特征点,每当遍历到所述第一特征点集合中的一个特征点时,根据相似度阈值确定所述第二特征点集合中是否存在与该特征点对应的匹配特征点,若是,则以该特征点和对应的所述匹配特征点为一对匹配点对;其中,所述匹配点对中两个特征点的相似度大于所述相似度阈值;在对所述第一特征点集合遍历完成后,当所述匹配点对的数量小于预设数量时,调整所述相似度阈值并返回所述遍历所述第一特征点集合中的所有特征点的步骤,直至所述匹配点对的数量大于或等于所述预设数量;根据匹配点对的数量大于或等于所述预设数量时的各所述匹配点对,确定所述待匹配图像在所述测试页面图像中的位置。2.根据权利要求1所述的方法,其特征在于,在第一次对所述第一特征点集合进行遍历前还包括:获取所述第一特征点集合中特征点的数量;根据所述数量设定第一次对所述第一特征点集合进行遍历时的所述相似度阈值;其中,所述数量越大,则所述数量对应的所述相似度阈值越大。3.根据权利要求1所述的方法,其特征在于,所述调整所述相似度阈值包括:将所述相似度阈值降低固定值。4.根据权利要求1所述的方法,其特征在于,所述第一特征点集合或所述第二特征点集合中的特征点为尺度不变特征变换特征点或快速鲁棒特征特征点。5.根据权利要求1所述的方法,其特征在于,所述根据匹配点对的数量大于或等于所述预设数量时的各所述匹配点对,确定所述待匹配图像在所述测试页面图像中的位置,包括:计算匹配点对的数量大于或等于所述预设数量时的各所述匹配点对中所述匹配特征点的中心点坐标,根据所述中心点坐标确定所述待匹配图像在所述测试页面图像中的位置。6.一种页面元素定位装置,其特征在于,包括:图...

【专利技术属性】
技术研发人员:贺旭
申请(专利权)人:广州品唯软件有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1