百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术文章 > 正文

python自动化工具:pywinauto(pythonapp自动化)

myzbx 2025-04-08 16:43 29 浏览

简介

Pywinauto是完全由Python构建的一个模块,可以用于自动化 Windows 上的 GUI 应用程序。同时,它支持鼠标、键盘操作,在元素控件树较复杂的界面,可以辅助我们完成自动化操作。

我在工作中,主要是使用pywinauto来辅助做一些操作,来完成自动化测试。

pywinauto安装

先要确认本地有python环境,然后可以通过命令行安装pywinauto:

pip install pywinauto

如果你是使用ide,可以通过ide安装,比如我习惯使用pycharm,就可以在Project Interpreter中添加pywinauto:

还有一些手动安装的方法,但是有点繁琐,不是很推荐,这里就不介绍了。

访问技术选择

Pywinauto要操作应用,首先需要访问应用,主要有两种访问技术。WIN32访问技术支持MFC、VB6、VCL、简单WinForms控件开发的应用,MS UI Automation访问技术支持WinForms、WPS、QT5、WPF、Store apps、browsers等开发的应用。

win32 API的backend为「 win32 」,MS UI Automation的backend为「 uia 」。

Pywinauto中使用的backend默认为win32。可使用spy++或者Inspect工具判断backend适合选哪种。例如:如果使用py_inspect的uia模式,可见的控件和属性更多的话,backend可选uia,反之,backend可选win32。

这里提一下常用的分析工具:

  • SPY++,用于WIN32 API。当SPY++可以显示所有的控件时,访问技术应该选择"win32"。
  • Inspect.exe:如果Inspect.exe的模式设置为UIA模式,可以比SPY++显示更多的控件,则访问技术应该选择"uia"。
  • py_inspect:支持win32和uia两种访问技术,是SWAPY的替代。
  • UISPY:支持uia访问技术。
  • SWAPY:只支持win32访问技术。

我个人常用的是py_inspect和spy++。

打开应用

多数情况下都是需要打开应用的,实现方式也很简单:

app = Application(backend='uia').start('D:\WireShark\Wireshark.exe')

backend参数根据实际情况选择传uia还是win32。

start方法其实可以传两个参数,除了目标应用的启动程序地址,还可以传一个timeout,如果不传,默认是5s。如果你的目标程序启动、运行都很慢,可以将timeout设置久一点。

连接应用

如果要操控的应用已经处于启动状态,可以直接进行连接,而连接方式有多种可以选择:

# 通过应用完整路径
app = Application(backend='uia').connect(path="D:\WireShark\Wireshark.exe")
# 通过应用进程pid进行连接
app = Application(backend='uia').connect(process=pid)

其中Windows的pid可以通过任务管理器进行查看:

# 通过窗口句柄
app = Application(backend='uia').connect(handle=175)

但是我在实际操作的时候使用窗口句柄没有成功过,可能是我使用姿势不对,不过还是不推荐使用窗口句柄。

# 通过组合参数
app = Application(backend='uia').connect(title_re='Wire', class_name='MainWindow')

title_re参数传递的是应用的部分名称,class_name可以通过py_inspect查询到。

window,dialog定位

前面获取的对象都是应用,但是我们实际操作的是应用窗口,这里就来介绍怎么获取窗口和对话框。

最常用的是通过title定位:

window = app.window(title='Wireshark')

如果不清楚定位工具中的title在哪个位置,显示的是什么,可以通过print_control_identifiers()方法将所有的title都打印出来:

通过title定位的时候需要注意一下中英文的影响,如果是中文,可能会有编码问题,需要转码。

title其实只是window()方法中的一种关键字参数,window()方法可以接收很多中的关键字参数,且这些参数可以组合使用,例如这样:

window = app.window(title='Wireshark', class_name='MainWindow')

主要参数有这些:

  • class_name:ClassName
  • class_name_re:正则匹配window Classname
  • title:Name Window窗口名
  • title_re:正则匹配窗口名
  • best_match:模糊匹配类似的title
  • handle:句柄
  • framework_id:FrameworkId(一般情况下FrameworkId不是唯一的)
  • process:ProcessId,进程id(注意:每次启动后,进程id都会变)
  • control_id:在py_inspect可以查询到
  • control_type:在py_inspect可以查询到
  • auto_id:在py_inspect可以查询到

通过top_window()也能比较容易地获取到窗口,但是这个方法获取的是程序的顶级窗口,但可能不是Z-Order中的顶级窗口。所以这个方法使用的时候多调试几次。

窗口操作

窗口的操作主要有最小化、最大化、恢复、关闭窗口:

# 最小化窗口
dlg.minimize()
 
# 最大化窗口
dlg.maximize()
 
# 恢复窗口
dlg.restore()
 
# 关闭窗口
dlg.close()

control定位

控件的定位其实和窗口的定位基本一致,不太清楚为什么pywinauto在设计的时候会将窗口和控件作为一类东西。

相对于前面定位窗口的window()方法,定位控件的时候推荐使用child_window(),因为直接使用windows()的话,如果控件不是在当前窗口的子控件,是子子控件,就会定位不到,而child_window()方法就不会有这个问题,当然相对的缺点就是当控件深度太深的时候,执行这个方法会比较耗时。

child_window()方法传递的参数和window()是一样的。

控件操作

控件自带了一些操作方法:

# 单击
click_input() 
# 双击
double_click_input  
# 右击
right_click_input  

当这些不好用的时候,比如你的控件不支持点击,但是你又想点击一下,可以使用鼠标操作的一些方法:

# 导入鼠标方法
from pywinauto import mouse
# 点击鼠标左键,coords传的是像素位置
mouse.click(coords=(x,y))
# wheel_dist:为正向上滚动,为负向下滚动
mouse.mouse.scroll(coords=(x,y),wheel_dist=-1)

截图

测试过程中可能会需要截图作为证据,截图的方法也比较简单:

button = app.window(best_match='Unsaved').child_window(best_match='Cancel')
if button.exists(): 
		button..capture_as_image().save(img_path)

模拟键盘的操作

pywinauto也提供了键盘操作的方法:

# 导入键盘方法
from pywinauto.keyboard import *
# 全选
send_keys("^a") 
# “+”:Shift
# “^”:Ctrl
# “%”:Alt

等待机制

pywinauto有几个设置等待时间的方式,这里介绍一个:

# 等待窗口,超时时间是10s,重试1次
window.wait(wait_for='ready',timeout=10,retry_inteval=1)

实战

这里简单的演示一下用Wireshark自动抓包并保存:

import time

from pywinauto import Application, Desktop, mouse
from pywinauto.keyboard import send_keys


def click_control(control):
    control_rect = control.rectangle()
    top = control_rect.top
    bottom = control_rect.bottom
    left = control_rect.left
    right = control_rect.right
    mouse.click(coords=(int((left+right)/2), int((top+bottom)/2)))

app = Application(backend='uia').start('D:\WireShark\Wireshark.exe')
window = app.window(best_match='Wireshark')
time.sleep(5)
window.set_focus()
app.window(best_match='Wireshark').child_window(best_match='WLAN').double_click_input()
time.sleep(5)
app.window(best_match='正在捕获').child_window(best_match='停止').click_input()
app.window(best_match='*WLAN').child_window(best_match='文件').click_input()
app.window(best_match='*WLAN').child_window(best_match='另存为').click_input()
click_control(app.window(best_match='*WLAN').child_window(best_match='文件名(N)'))
send_keys('aaa')
app.window(best_match='*WLAN').child_window(best_match='保存').click_input()

总结

PC端自动化测试使用到的python模块主要有pywinauto、win32gui、pyautogui。这里介绍的pywinauto主要使用到Application类,用于应用程序管理(打开与关闭应用等)、窗口管理(最小化、最大化、关闭窗口)、控件操作。

pywinauto的功能其实挺丰富的,但是真正用到的其实只是其中很小的一块,感兴趣的同学可以多去官网翻一翻。

相关推荐

如何设计一个优秀的电子商务产品详情页

加入人人都是产品经理【起点学院】产品经理实战训练营,BAT产品总监手把手带你学产品电子商务网站的产品详情页面无疑是设计师和开发人员关注的最重要的网页之一。产品详情页面是客户作出“加入购物车”决定的页面...

怎么在JS中使用Ajax进行异步请求?

大家好,今天我来分享一项JavaScript的实战技巧,即如何在JS中使用Ajax进行异步请求,让你的网页速度瞬间提升。Ajax是一种在不刷新整个网页的情况下与服务器进行数据交互的技术,可以实现异步加...

中小企业如何组建,管理团队_中小企业应当如何开展组织结构设计变革

前言写了太多关于产品的东西觉得应该换换口味.从码农到架构师,从前端到平面再到UI、UE,最后走向了产品这条不归路,其实以前一直再给你们讲.产品经理跟项目经理区别没有特别大,两个岗位之间有很...

前端监控 SDK 开发分享_前端监控系统 开源

一、前言随着前端的发展和被重视,慢慢的行业内对于前端监控系统的重视程度也在增加。这里不对为什么需要监控再做解释。那我们先直接说说需求。对于中小型公司来说,可以直接使用三方的监控,比如自己搭建一套免费的...

Ajax 会被 fetch 取代吗?Axios 怎么办?

大家好,很高兴又见面了,我是"高级前端进阶",由我带着大家一起关注前端前沿、深入前端底层技术,大家一起进步,也欢迎大家关注、点赞、收藏、转发!今天给大家带来的主题是ajax、fetch...

前端面试题《AJAX》_前端面试ajax考点汇总

1.什么是ajax?ajax作用是什么?AJAX=异步JavaScript和XML。AJAX是一种用于创建快速动态网页的技术。通过在后台与服务器进行少量数据交换,AJAX可以使网页实...

Ajax 详细介绍_ajax

1、ajax是什么?asynchronousjavascriptandxml:异步的javascript和xml。ajax是用来改善用户体验的一种技术,其本质是利用浏览器内置的一个特殊的...

6款可替代dreamweaver的工具_替代powerdesigner的工具

dreamweaver对一个web前端工作者来说,再熟悉不过了,像我07年接触web前端开发就是用的dreamweaver,一直用到现在,身边的朋友有跟我推荐过各种更好用的可替代dreamweaver...

我敢保证,全网没有再比这更详细的Java知识点总结了,送你啊

接下来你看到的将是全网最详细的Java知识点总结,全文分为三大部分:Java基础、Java框架、Java+云数据小编将为大家仔细讲解每大部分里面的详细知识点,别眨眼,从小白到大佬、零基础到精通,你绝...

福斯《死侍》发布新剧照 "小贱贱"韦德被改造前造型曝光

时光网讯福斯出品的科幻片《死侍》今天发布新剧照,其中一张是较为罕见的死侍在被改造之前的剧照,其余两张剧照都是死侍在执行任务中的状态。据外媒推测,片方此时发布剧照,预计是为了给不久之后影片发布首款正式预...

2021年超详细的java学习路线总结—纯干货分享

本文整理了java开发的学习路线和相关的学习资源,非常适合零基础入门java的同学,希望大家在学习的时候,能够节省时间。纯干货,良心推荐!第一阶段:Java基础重点知识点:数据类型、核心语法、面向对象...

不用海淘,真黑五来到你身边:亚马逊15件热卖爆款推荐!

Fujifilm富士instaxMini8小黄人拍立得相机(黄色/蓝色)扫二维码进入购物页面黑五是入手一个轻巧可爱的拍立得相机的好时机,此款是mini8的小黄人特别版,除了颜色涂装成小黄人...

2025 年 Python 爬虫四大前沿技术:从异步到 AI

作为互联网大厂的后端Python爬虫开发,你是否也曾遇到过这些痛点:面对海量目标URL,单线程爬虫爬取一周还没完成任务;动态渲染的SPA页面,requests库返回的全是空白代码;好不容易...

最贱超级英雄《死侍》来了!_死侍超燃

死侍Deadpool(2016)导演:蒂姆·米勒编剧:略特·里斯/保罗·沃尼克主演:瑞恩·雷诺兹/莫蕾娜·巴卡林/吉娜·卡拉诺/艾德·斯克林/T·J·米勒类型:动作/...

停止javascript的ajax请求,取消axios请求,取消reactfetch请求

一、Ajax原生里可以通过XMLHttpRequest对象上的abort方法来中断ajax。注意abort方法不能阻止向服务器发送请求,只能停止当前ajax请求。停止javascript的ajax请求...