使用 PyAutoGUI 库在 Python 中自动化 GUI 交互

---

PyAutoGUI 是一个用于自动化 Python 应用程序中图形用户界面交互的出色模块。它使开发人员能够模拟用户输入并自动化重复操作，使其成为测试、数据输入和其他需要与 GUI 交互的任务的理想选择。PyAutoGUI 是一个跨平台库，支持所有主要的操作系统，例如 Windows、Linux 和 macOS。

在本教程中，我们将了解如何使用 Python 的 PyAutoGUI 包来自动化 GUI 交互。我们将首先安装 PyAutoGUI 并学习如何使用它。然后，我们将深入探讨该库的功能，例如键盘和鼠标控制以及图像识别。我们将在过程中提供示例，以帮助演示库的功能以及如何将其用于简化和自动化各种任务。

在本教程结束时，读者应该对 PyAutoGUI 以及如何将其用于自动化 Python 应用程序中的 GUI 交互有一个扎实的了解。无论您是软件开发人员、数据分析师，还是只是在寻找优化工作流程的方法，PyAutoGUI 都是一个强大的包，可以帮助您节省时间并提高工作效率。

既然我们知道我们将要处理什么，那么让我们开始吧！

入门

在深入研究使用 PyAutoGUI 自动化 GUI 交互之前，我们首先需要使用 pip 安装 PyAutoGUI 模块。

但是，由于它不是内置的，因此我们必须首先安装 PyAutoGUI 库。这可以使用 pip 包管理器完成。

要安装 PyAutoGUI 库，请打开您的终端并键入以下命令 -

pip install scikit-surprise

软件包成功安装后，我们就可以开始使用它了！

使用 PyAutoGUI 自动化 GUI 交互

现在我们已经安装了 PyAutoGUI，让我们探索其一些功能以及如何使用它们来自动化 GUI 交互。

基本用法

我们需要做的第一件事是将 PyAutoGUI 模块导入到我们的 Python 脚本中 -

import pyautogui

PyAutoGUI 模块包含用于控制键盘和鼠标以及用于截取屏幕截图和识别屏幕上图像的例程。

键盘控制

在 PyAutoGUI 中，可以使用 typewrite() 函数模拟键盘输入。此函数接收一个字符串并模拟在键盘上键入它。例如 -

import pyautogui
pyautogui.typewrite('Hello, World!')

以上代码使它看起来像键盘键入了提供的文本中的单词。

您还可以使用 hotkey() 函数模拟一次按下多个键。

import pyautogui
pyautogui.hotkey('ctrl', 'c')

此代码将模拟同时按下“ctrl”和“c”键，这类似于复制文本。

类似地，如果您想使用 PyAutoGUI 模拟粘贴，您可以轻松地使用以下脚本。

import pyautogui
pyautogui.hotkey('ctrl', 'v')

鼠标控制

要使用 PyAutoGUI 模拟鼠标输入，我们可以使用 moveTo()、click() 和 dragTo() 等函数。例如 -

import pyautogui

# Move the mouse to coordinates (100, 100)
pyautogui.moveTo(100, 100)

# Click the left mouse button
pyautogui.click()

此代码将鼠标移动到屏幕上的 (100, 100) 坐标，然后单击鼠标左键。

我们还可以使用 dragTo() 函数模拟拖动鼠标。例如 -

import pyautogui

# Move the mouse to coordinates (100, 100)
pyautogui.moveTo(100, 100)

# Click and drag the left mouse button to coordinates (200, 200)
pyautogui.dragTo(200, 200, button='left')

此代码将鼠标移动到 (100, 100) 坐标，单击鼠标左键，然后将鼠标拖动到 (200, 200) 坐标。

图像识别

PyAutoGUI 还包括用于在屏幕上查找图像的工具。这对于自动化需要用户在图形用户界面中单击特定按钮或图标的操作可能很有用。

locateOnScreen() 函数可用于在屏幕上查找图像。此函数接受文件名作为输入，并返回屏幕上图像第一次出现的左上角坐标。例如 -

import pyautogui

# Locate the "start_button.png" image on the screen
button_location = pyautogui.locateOnScreen('start_button.png')

# Click the center of the button
button_center = pyautogui.center(button_location)
pyautogui.click(button_center)

此代码将在屏幕上找到“start_button.png”图像，然后单击按钮的中心。

完整程序

以下是完整代码 -

import pyautogui

# Simulate typing the text "Hello, World!"
pyautogui.typewrite('Hello, World!')

# Simulate pressing the "ctrl" and "c" keys at the same time
pyautogui.hotkey('ctrl', 'c')

# Simulate pressing the "ctrl" and "v" keys at the same time
pyautogui.hotkey('ctrl', 'v')

# Move the mouse to coordinates (100, 100) 
# and click the left mouse button
pyautogui.moveTo(100, 100)
pyautogui.click()

# Move the mouse to coordinates (100, 100) 
# Click the left mouse button and drag to coordinates (200, 200)
pyautogui.moveTo(100, 100)
pyautogui.dragTo(200, 200, button='left')

# Locate the "start_button.png" image on the screen 
# and click the center of the button
button_location = pyautogui.locateOnScreen('start_button.png')
button_center = pyautogui.center(button_location)
pyautogui.click(button_center)

结论

PyAutoGUI 包是用于自动化 Python 应用程序中 GUI 交互的出色资源。它简化了模拟用户输入和自动化重复操作的过程，使其成为各种用例（例如测试、数据输入以及其他需要与图形用户界面交互的任务）的绝佳解决方案。

在本教程中，我们已经了解了 PyAutoGUI 的功能和特性，例如安装和基本用法、键盘和鼠标控制以及图像识别。开发人员可以通过了解这些功能来充分利用 PyAutoGUI 的潜力，从而改善其工作流程并简化其应用程序。

PyAutoGUI 的主要优势之一是其简单性。即使是那些对 GUI 自动化经验不多的开发人员也可以快速学习如何使用它。此外，其跨平台的灵活性使其成为在各种操作系统上工作的开发人员的绝佳选择。

总的来说，PyAutoGUI 提供了广泛的功能，使其成为寻求自动化其应用程序中 GUI 交互的 Python 开发人员的实用工具包。开发人员可以通过使用 PyAutoGUI 来节省时间、提高生产力并提高其程序的整体质量。鼓励读者阅读官方文档，以了解更多有关 PyAutoGUI 及其功能的信息。