python自动化工具:pywinauto(pythonapp自动化)
myzbx 2025-04-08 16:43 16 浏览
简介
Pywinauto是完全由Python构建的一个模块,可以用于自动化 Windows 上的 GUI 应用程序。同时,它支持鼠标、键盘操作,在元素控件树较复杂的界面,可以辅助我们完成自动化操作。
我在工作中,主要是使用pywinauto来辅助做一些操作,来完成自动化测试。
pywinauto安装
先要确认本地有python环境,然后可以通过命令行安装pywinauto:
pip install pywinauto
如果你是使用ide,可以通过ide安装,比如我习惯使用pycharm,就可以在Project Interpreter中添加pywinauto:
还有一些手动安装的方法,但是有点繁琐,不是很推荐,这里就不介绍了。
访问技术选择
Pywinauto要操作应用,首先需要访问应用,主要有两种访问技术。WIN32访问技术支持MFC、VB6、VCL、简单WinForms控件开发的应用,MS UI Automation访问技术支持WinForms、WPS、QT5、WPF、Store apps、browsers等开发的应用。
win32 API的backend为「 win32 」,MS UI Automation的backend为「 uia 」。
Pywinauto中使用的backend默认为win32。可使用spy++或者Inspect工具判断backend适合选哪种。例如:如果使用py_inspect的uia模式,可见的控件和属性更多的话,backend可选uia,反之,backend可选win32。
这里提一下常用的分析工具:
- SPY++,用于WIN32 API。当SPY++可以显示所有的控件时,访问技术应该选择"win32"。
- Inspect.exe:如果Inspect.exe的模式设置为UIA模式,可以比SPY++显示更多的控件,则访问技术应该选择"uia"。
- py_inspect:支持win32和uia两种访问技术,是SWAPY的替代。
- UISPY:支持uia访问技术。
- SWAPY:只支持win32访问技术。
我个人常用的是py_inspect和spy++。
打开应用
多数情况下都是需要打开应用的,实现方式也很简单:
app = Application(backend='uia').start('D:\WireShark\Wireshark.exe')
backend参数根据实际情况选择传uia还是win32。
start方法其实可以传两个参数,除了目标应用的启动程序地址,还可以传一个timeout,如果不传,默认是5s。如果你的目标程序启动、运行都很慢,可以将timeout设置久一点。
连接应用
如果要操控的应用已经处于启动状态,可以直接进行连接,而连接方式有多种可以选择:
# 通过应用完整路径
app = Application(backend='uia').connect(path="D:\WireShark\Wireshark.exe")
# 通过应用进程pid进行连接
app = Application(backend='uia').connect(process=pid)
其中Windows的pid可以通过任务管理器进行查看:
# 通过窗口句柄
app = Application(backend='uia').connect(handle=175)
但是我在实际操作的时候使用窗口句柄没有成功过,可能是我使用姿势不对,不过还是不推荐使用窗口句柄。
# 通过组合参数
app = Application(backend='uia').connect(title_re='Wire', class_name='MainWindow')
title_re参数传递的是应用的部分名称,class_name可以通过py_inspect查询到。
window,dialog定位
前面获取的对象都是应用,但是我们实际操作的是应用窗口,这里就来介绍怎么获取窗口和对话框。
最常用的是通过title定位:
window = app.window(title='Wireshark')
如果不清楚定位工具中的title在哪个位置,显示的是什么,可以通过print_control_identifiers()方法将所有的title都打印出来:
通过title定位的时候需要注意一下中英文的影响,如果是中文,可能会有编码问题,需要转码。
title其实只是window()方法中的一种关键字参数,window()方法可以接收很多中的关键字参数,且这些参数可以组合使用,例如这样:
window = app.window(title='Wireshark', class_name='MainWindow')
主要参数有这些:
- class_name:ClassName
- class_name_re:正则匹配window Classname
- title:Name Window窗口名
- title_re:正则匹配窗口名
- best_match:模糊匹配类似的title
- handle:句柄
- framework_id:FrameworkId(一般情况下FrameworkId不是唯一的)
- process:ProcessId,进程id(注意:每次启动后,进程id都会变)
- control_id:在py_inspect可以查询到
- control_type:在py_inspect可以查询到
- auto_id:在py_inspect可以查询到
通过top_window()也能比较容易地获取到窗口,但是这个方法获取的是程序的顶级窗口,但可能不是Z-Order中的顶级窗口。所以这个方法使用的时候多调试几次。
窗口操作
窗口的操作主要有最小化、最大化、恢复、关闭窗口:
# 最小化窗口
dlg.minimize()
# 最大化窗口
dlg.maximize()
# 恢复窗口
dlg.restore()
# 关闭窗口
dlg.close()
control定位
控件的定位其实和窗口的定位基本一致,不太清楚为什么pywinauto在设计的时候会将窗口和控件作为一类东西。
相对于前面定位窗口的window()方法,定位控件的时候推荐使用child_window(),因为直接使用windows()的话,如果控件不是在当前窗口的子控件,是子子控件,就会定位不到,而child_window()方法就不会有这个问题,当然相对的缺点就是当控件深度太深的时候,执行这个方法会比较耗时。
child_window()方法传递的参数和window()是一样的。
控件操作
控件自带了一些操作方法:
# 单击
click_input()
# 双击
double_click_input
# 右击
right_click_input
当这些不好用的时候,比如你的控件不支持点击,但是你又想点击一下,可以使用鼠标操作的一些方法:
# 导入鼠标方法
from pywinauto import mouse
# 点击鼠标左键,coords传的是像素位置
mouse.click(coords=(x,y))
# wheel_dist:为正向上滚动,为负向下滚动
mouse.mouse.scroll(coords=(x,y),wheel_dist=-1)
截图
测试过程中可能会需要截图作为证据,截图的方法也比较简单:
button = app.window(best_match='Unsaved').child_window(best_match='Cancel')
if button.exists():
button..capture_as_image().save(img_path)
模拟键盘的操作
pywinauto也提供了键盘操作的方法:
# 导入键盘方法
from pywinauto.keyboard import *
# 全选
send_keys("^a")
# “+”:Shift
# “^”:Ctrl
# “%”:Alt
等待机制
pywinauto有几个设置等待时间的方式,这里介绍一个:
# 等待窗口,超时时间是10s,重试1次
window.wait(wait_for='ready',timeout=10,retry_inteval=1)
实战
这里简单的演示一下用Wireshark自动抓包并保存:
import time
from pywinauto import Application, Desktop, mouse
from pywinauto.keyboard import send_keys
def click_control(control):
control_rect = control.rectangle()
top = control_rect.top
bottom = control_rect.bottom
left = control_rect.left
right = control_rect.right
mouse.click(coords=(int((left+right)/2), int((top+bottom)/2)))
app = Application(backend='uia').start('D:\WireShark\Wireshark.exe')
window = app.window(best_match='Wireshark')
time.sleep(5)
window.set_focus()
app.window(best_match='Wireshark').child_window(best_match='WLAN').double_click_input()
time.sleep(5)
app.window(best_match='正在捕获').child_window(best_match='停止').click_input()
app.window(best_match='*WLAN').child_window(best_match='文件').click_input()
app.window(best_match='*WLAN').child_window(best_match='另存为').click_input()
click_control(app.window(best_match='*WLAN').child_window(best_match='文件名(N)'))
send_keys('aaa')
app.window(best_match='*WLAN').child_window(best_match='保存').click_input()
总结
PC端自动化测试使用到的python模块主要有pywinauto、win32gui、pyautogui。这里介绍的pywinauto主要使用到Application类,用于应用程序管理(打开与关闭应用等)、窗口管理(最小化、最大化、关闭窗口)、控件操作。
pywinauto的功能其实挺丰富的,但是真正用到的其实只是其中很小的一块,感兴趣的同学可以多去官网翻一翻。
相关推荐
- 零基础入门AI智能体:详细了解什么是变量类型、JSON结构、Markdown格式
-
当品牌跳出固有框架,以跨界联动、场景创新叩击年轻群体的兴趣点,一场关于如何在迭代中保持鲜活的探索正在展开,既藏着破圈的巧思,也映照着与新一代对话的密码。在创建AI智能体时,我们会调用插件或大模型,而在...
- C# 13模式匹配:递归模式与属性模式在真实代码中的性能影响分析
-
C#13对模式匹配的增强让复杂数据处理代码更简洁,但递归模式与属性模式的性能差异一直是开发者关注的焦点。在实际项目中,选择合适的模式不仅影响代码可读性,还可能导致执行效率的显著差异。本文结合真实测试...
- 零基础快速入门 VBA 系列 6 —— 常用对象(工作簿、工作表和区域)
-
上一节,我介绍了VBA内置函数以及如何自动打字和自动保存文件。这一节,我们来了解一下Excel常用对象。Excel常用对象Excel有很多对象,其中最常用也最重要的包括以下3个:1.Workbo...
- 不同生命数字的生肖龙!准到雷普!
-
属龙的人总在自信爆棚和自讨苦吃之间反复横跳?看完这届龙宝宝的日常我悟了。属龙的人好像天生自带矛盾体:领导力超强可人缘时好时坏,工作雷厉风行却总在爱情里翻车。关键年份的龙性格差异更大——76年龙靠谱但不...
- 仓颉编程语言基础-面向对象编程-属性(Properties)
-
属性是仓颉颉中一种强大的机制,它允许你封装对类(或接口interface、结构体struct、枚举enum、扩展extend)内部状态的访问。它看起来像一个普通的成员变量(字段),但在其背后,它通过...
- Python中class对象/属性/方法/继承/多态/魔法方法详解
-
一、基础入门:认识类和对象1.类和对象的概念在Python中,类(class)是一种抽象的概念,用于定义对象的属性和行为,而对象(也称为实例)则是类的具体表现。比如,“汽车”可以是一个类,它有...
- VBA基础入门:搞清楚对象、属性和方法就成功了一半
-
如果你刚接触VBA(VisualBasicforApplications),可能会被“对象”“属性”“方法”这些术语搞得一头雾水。但事实上,这三个概念是VBA编程的基石。只要理解它们之间的关系,...
- P.O类型文推荐|年度编推合集(一百九十五篇)
-
点击左上方关注获取更多精彩推文目录2019年度编推35篇(1V1)《悖论》作者:流苏.txt(1V1)《桂花蒸》作者:大姑娘浪.txt(1V1)《豪门浪女》作者:奚行.txt...
- Python参数传递内存大揭秘:可变对象 vs 不可变对象
-
90%的Python程序员不知道,函数参数传递中可变对象的修改竟会导致意想不到的副作用!一、参数传递的本质:对象引用传递在Python中,所有参数传递都是对象引用的传递。这意味着函数调用时传递的不是对...
- JS 开发者必看!TC39 2025 最新动向,这些新语法要火?
-
大家好,很高兴又见面了,我是"高级前端进阶",由我带着大家一起关注前端前沿、深入前端底层技术,大家一起进步,也欢迎大家关注、点赞、收藏、转发,您的支持是我不断创作的动力。TC39第...
- 2025 年值得尝试的 5 个被低估的 JavaScript 库
-
这些JavaScript库可能不会在社交媒体或HackerNews上流行起来,但它们会显著提高您的工作效率和代码质量。JavaScript不再只是框架。虽然React、Vue和Sv...
- Python自动化办公应用学习笔记30—函数的参数
-
一、函数的参数1.形参:o定义:在函数定义时,声明在函数名后面括号中的变量。o作用:它们是函数内部的占位符变量,用于接收函数被调用时传入的实际值。o生命周期:在函数被调用时创建,在函数执...
- 16种MBTI人格全解析|测完我沉默了三秒:原来我是这样的人?
-
MBTI性格测试火了这么久,你还不知道自己是哪一型?有人拿它当社交话题,有人拿它分析老板性格,还有人干脆当成择偶参考表。不废话,今天我一次性给你整理全部16种MBTI人格类型!看完你不仅能知道自己是谁...
- JS基础与高级应用: 性能优化
-
在现代Web开发中,性能优化已成为前端工程师必须掌握的核心技能之一。本文从URL输入到页面加载完成的全过程出发,深入分析了HTTP协议的演进、域名解析、代码层面性能优化以及编译与渲染的最佳实践。通过节...
- 爱思创CSP-J/S初赛模拟赛线上开赛!助力冲入2024年CSP-J/S复赛!
-
CSP-J/S组初赛模拟赛爱思创,专注信奥教育19年,2022年CSP-J/S组赛事指定考点,特邀NOIP教练,开启全真实CSP-J/S组线上初赛模拟大赛!一、比赛对象:2024年备考CSP-J/S初...
- 一周热门
- 最近发表
-
- 零基础入门AI智能体:详细了解什么是变量类型、JSON结构、Markdown格式
- C# 13模式匹配:递归模式与属性模式在真实代码中的性能影响分析
- 零基础快速入门 VBA 系列 6 —— 常用对象(工作簿、工作表和区域)
- 不同生命数字的生肖龙!准到雷普!
- 仓颉编程语言基础-面向对象编程-属性(Properties)
- Python中class对象/属性/方法/继承/多态/魔法方法详解
- VBA基础入门:搞清楚对象、属性和方法就成功了一半
- P.O类型文推荐|年度编推合集(一百九十五篇)
- Python参数传递内存大揭秘:可变对象 vs 不可变对象
- JS 开发者必看!TC39 2025 最新动向,这些新语法要火?
- 标签列表
-
- HTML 简介 (30)
- HTML 响应式设计 (31)
- HTML URL 编码 (32)
- HTML Web 服务器 (31)
- HTML 表单属性 (32)
- HTML 音频 (31)
- HTML5 支持 (33)
- HTML API (36)
- HTML 总结 (32)
- HTML 全局属性 (32)
- HTML 事件 (31)
- HTML 画布 (32)
- HTTP 方法 (30)
- 键盘快捷键 (30)
- CSS 语法 (35)
- CSS 轮廓宽度 (31)
- CSS 谷歌字体 (33)
- CSS 链接 (31)
- CSS 定位 (31)
- CSS 图片库 (32)
- CSS 图像精灵 (31)
- SVG 文本 (32)
- 时钟启动 (33)
- HTML 游戏 (34)
- JS Loop For (32)