python - 如何使用 selenium webdriver (python) 将鼠标移动 (pyautogui) 附加到 pyvirtualdisplay？

Question

我正在尝试自动化一个网站，里面有一个 SWF。

我不能用 selenium 移动鼠标，因为它是一个 SWF，所以为了解决这个问题，我使用了 pyautogui 库。

一切正常！，但是！当我使用 pyvirtualdisplay 隐藏导航器时，鼠标没有连接，所以我仍然看到 pyautogui 如何移动我的鼠标。

我的示例代码：

from selenium import webdriver
from pyvirtualdisplay import Display
import pyautogui

display = Display(visible=1, size=(1600,900))
display.start()


driver = webdriver.Firefox()
driver.set_window_size(1600,900)
driver.get('https://website.where.I.have.the.SWF.com')

sleep(5)
pyautogui.click(450, 180)

driver.close()
display.stop()

如何将鼠标附加到 pyvirtualdisplay 实例？

Answer 1

您可以对 pyautogui 内部进行猴子补丁。在“xvfb”后端测试。

import os
from pyvirtualdisplay import Display
import pyautogui
import Xlib.display

v_display = Display(visible=1, size=(1600,900))
v_display.start()  # this changes the DISPLAY environment variable
# sadly, pyautogui does not detect this change
pyautogui._pyautogui_x11._display = Xlib.display.Display(
                os.environ['DISPLAY']
            )
...
pyautogui.click(...)  # clicks on v_display
...

v_display.stop()

注意：这应该足以启用 pyautogui 鼠标，使用键盘可能需要额外配置键映射。更多信息，请参见： https ://github.com/asweigart/pyautogui/blob/master/pyautogui/_pyautogui_x11.py