此文章来源于项目官方公众号:“AirtestProject”
版权声明:允许转载,但转载有必要保存原链接;请勿用作商业或者非法用处

1. 前语

今天聊一下同学们经常问到的关于Airtest找图的2个问题,一个是,如安在Airtest里边做多图查找;另一个是,如何直接传入2张图片,然后核算他们的可信度。

2. 多图查找:find_all

这里的多图查找,指的是,一个画面中,存在多个相同/类似的图标,咱们期望把他们都找出来,然后对所有的成果坐标进行操作。

举个最常见的例子,消消乐:

Airtest的多图查找与两图对比

假定咱们的方针是,找到4个小黄鸡的坐标,然后对它逐一进行点击,那咱们就能够使用Airtest供给的API,find_all 来完成:

Airtest的多图查找与两图对比

# -*- encoding=utf8 -*-
__author__ = "AirtestProject"
from airtest.core.api import *
auto_setup(__file__)
results= find_all(Template(r"tpl1662624311911.png", record_pos=(-0.002, -0.178), resolution=(1080, 2520)))
print("--------------------------------")
print(results)
for i in range(0,4):
    touch(results[i]['result'])
    sleep(1.0)

find_all 给咱们回来的成果是一个列表,列表里边包含了识别成果的字典,从字典的 result 键值中,咱们能够拿到咱们想要的坐标信息:

[{'result': (538, 1423), 'rectangle': ((490, 1363), (490, 1483), (587, 1483), (587, 1363)), 'confidence': 0.9852163195610046},
{'result': (301, 1186), 'rectangle': ((253, 1126), (253, 1246), (350, 1246), (350, 1126)), 'confidence': 0.9825006723403931}, 
{'result': (775, 1186), 'rectangle': ((727, 1126), (727, 1246), (824, 1246), (824, 1126)), 'confidence': 0.9197724461555481}, 
{'result': (249, 1894), 'rectangle': ((201, 1834), (201, 1954), (298, 1954), (298, 1834)), 'confidence': 0.7261688709259033}]

3. 两图对比

有部分特别场景,咱们需求对比截取好的2张图片的类似度,这时候咱们能够用Airtest供给的 cal_ccoeff_confidence 方法:

Airtest的多图查找与两图对比

# -*- encoding=utf8 -*-
__author__ = "AirtestProject"
from airtest.core.api import *
from airtest.aircv.cal_confidence import *
auto_setup(__file__)
img1 = cv2.resize(cv2.imread(r"frog.png"),(85,100))
img2 = cv2.resize(cv2.imread(r"chick.png"),(85,100))
confidence = cal_ccoeff_confidence(img1,img2)
print("----------------")
print(confidence)

其间:

  • cv2.resize 用于一致图片尺寸,上图中的(85,100)为咱们指定的方针尺寸
  • cv2.imread用于读取本地路径下的图片
  • cal_ccoeff_confidence用于对比两张图片的类似度,回来可信度的值

4. 小结

那今天的推文咱们就简略聊了2个Airtest关于找图和图片对比的API,其实关于多图查找还有两图对比,Airtest还给咱们供给了更多的方法,感兴趣的同学能够关注咱们后续的推文~


AirtestIDE下载:airtest.netease.com/
Airtest 教程官网:airtest.doc.io.netease.com/
搭建企业私有云服务:airlab.163.com/b2b

官方答疑 Q 群:117973773