文章详情

短信预约-IT技能 免费直播动态提醒

请输入下面的图形验证码

提交验证

短信预约提醒成功

Python制作模拟按键摘录,pyautogui库及该库在某些窗口不生效的问题部分解决措施(PyDirectInput库、winio驱动级模拟)

2023-09-15 14:20

关注

文章目录

原文出处:https://blog.csdn.net/qq_61260911/article/details/129885971

1、安装pyautogui库

安装pyautogui库,可以通过pip命令安装:

pip install pyautogui

安装完成后,就可以开始使用pyautogui库了。

2、导入并在py中使用

(1) 导包

import pyautoguipyautogui.typewrite('Hello world!')

上述代码将模拟键盘输入“Hello world!”。

(2)基本鼠标控制

PyAutoGUI可以模拟鼠标的点击和移动。以下是一些基本操作:
moveTo(x, y):将鼠标移动到屏幕上的指定位置。
click(x=None, y=None, button=‘left’):在指定位置单击鼠标左键、右键或中键。
doubleClick(x=None, y=None, button=‘left’):在指定位置双击鼠标左键、右键或中键。
rightClick(x=None, y=None):在指定位置单击鼠标右键。
middleClick(x=None, y=None):在指定位置单击鼠标中键。
dragTo(x, y, duration=0.5):将鼠标拖动到指定位置。’

例如:

# 将鼠标移动到屏幕中央pyautogui.moveTo(pyautogui.size()[0]/2, pyautogui.size()[1]/2)# 在屏幕中央单击鼠标左键pyautogui.click()

获取鼠标当前位置坐标

x, y = pyautogui.position()print(f"鼠标当前位置:{x}, {y}")

(3)基本键盘控制

typewrite(message, interval=0.1):将字符串输入到键盘,可以设置键入每个字符的时间间隔。
press(key):按下指定的键。
release(key):释放指定的键。
hotekey(‘ctrl’,key)::按下组合键

例如:

pyautogui.press('a')# 模拟释放键盘的A键pyautogui.release('a')#组合键pyautogui.hotkey('ctrl','v')

(4)屏幕截图

该包还包含截取图像操作,具体使用如下。

screenshot():截取屏幕上的图像,并返回PIL图像对象。

# 截取整个屏幕screenshot = pyautogui.screenshot()# 截取指定范围imag=pyautogui.screenshot(region=(0, 0, 300, 400))#(x,y,w,h)4个点的位置

(5)图片位置识别

PyAutoGUI可以识别图片所在的位置.

img_path='location.png'location=pyautogui.locateOnScreen(img_path)print(location)

但是很多时候图片识别不到,返回None,这个时候就要对识别参数进行设置
confidence 是一个可选参数,表示搜索图像时所需的置信度或准确度。它是一个介于0到1之间的浮点数,表示函数在搜索图像时所需的匹配准确度。值越高,匹配准确度就越高,但搜索速度可能会变慢。值越低,则匹配准确度可能会降低,但搜索速度会更快。

例如,当设置confidence为0.5时,函数将会搜索与给定图像相匹配的区域,并且只有当置信度大于等于0.5时,函数才会返回该区域的位置。因此,confidence的值可以影响函数的性能和准确性,取决于您所需要的搜索结果的精度和速度。

pyautogui.locateOnScreen(confidence=0.5)

3、存在问题

(1)pyautogui库在某些游戏窗口中可能不生效的问题,可尝试第二章方式。
(2)在某些窗口键盘操作需要以管理员运行py脚本。

原文链接:https://learncodebygaming.com/blog/pyautogui-not-working-use-directinput

那么为什么 PyAutoGUI 不适用于某些视频游戏呢?在 Windows 上,PyAutoGUI 使用稍旧的、略微弃用的 Windows API 来模拟鼠标和键盘输入。通常这很好,但是当您与大量使用 DirectX 的程序交互时,就像大多数 3D 视频游戏一样,您可能会遇到问题。如果您不知道 DirectX 是什么,它只是由 Microsoft 编写的库和 API 的集合,用于简化视频游戏开发。它非常成功,这基本上就是 Windows 主导 PC 游戏的原因。 DirectX 的子集之一是 DirectInput。 DirectInput 基本上是视频游戏开发人员在处理游戏的用户输入时使用的更简单、更强大的界面。很多时候,游戏开发者会选择只支持 DirectInput,因为它的开发较少而且玩家不太可能注意到。

因此,为了解决我们遇到的问题,我们只需要让 PyAutoGUI 使用 DirectInput Windows API,而不是它当前使用的 API。所以我写了一个 Python 包来做到这一点。我称它为 PyDirectInput。为了准确了解 PyAutoGUI
做错了什么,以及我的库如何修复它,让我向您阅读 README 的开头段落,然后我将向您展示如何在实践中使用它。

您只需使用以下命令安装 PyDirectInput: pip install pydirectinput

如果你有一个像这样的简单 PyAutoGUI 脚本:

import pyautogui import time   time.sleep(4) pyautogui.keyDown('w')time.sleep(1) pyautogui.keyUp('w')

您只需将 pyautogui 替换为 pydirectinput 即可使用 DirectInput
游戏。我已经使两个项目之间的所有函数声明都相同,因此您可以轻松地在它们之间进行交换。

import pyautoguiimport pydirectinputimport timetime.sleep(4)pydirectinput.keyDown('w')time.sleep(1)pydirectinput.keyUp('w')

我还没有在 PyDirectInput 中实现 PyAutoGUI 的所有功能。您应该继续使用 PyAutoGUI
的所有屏幕阅读功能。另一个大问题是持续时间的鼠标移动,它在屏幕上缓慢移动光标,我还没有实现。当您使用 PyDirectInput 中的
moveTo() 功能时,它会立即跳转到屏幕上的那个位置。在 README 中,我已经注意到我没有时间移植的所有功能。

因此,如果您需要这些缺失的任何功能,这是参与开源项目的绝佳机会。当您有工作时向我发送拉取请求,或者如果您需要帮助,我很乐意与您合作。如果您在此之前从未为开源做出过贡献,那么这应该是一种非常友好的进入方式,因为您可以查看所有
PyAutoGUI 源代码,并且可以参考我已经完成的工作,所以它应该只是大量的复制/粘贴并填写空白类型的东西。当然还有测试。

在个别游戏应用窗口普通模拟按键方式均失效,可尝试硬件模拟方式,类似于“按键精灵”应用中Setsimmode = 1的设置。该方式需要主板支持PS2(圆口)键鼠。

参考原文:https://blog.csdn.net/qq_38316721/article/details/128747370

1、安装配置

(1)环境设置

电脑需要主板支持PS2(圆口)键鼠。
设置系统的“禁止驱动程序强制签名”,详细步骤可另行搜索,大致可概括为:设置->恢复->高级启动(立即重新启动)->重启后选择疑难解答->高级选项->启动设置->点击重启按钮->按指引选择。
该方式仅当前这次启动生效。

(2)安装rabird.winio环境

终端下执行pip install rabird.winio
2、启动后进入存储该包的目录“\Python\Python36\Lib\site-packages\winiobinary\data\3.0”,每个人的电脑可能不一样,按照以下提示操作。
在这里插入图片描述
右键WinIO64.sys,选择属性-数字签名
选择签名点击详细信息
3.点击查看证书
4.点击安装证书
在这里插入图片描述
5.点击下一步
6.浏览选择受信任的根证书颁发机构
7.直接下一步然后完成

2、使用示例

使用以下代码并引用相关函数实现具体功能。
例如:key_press(scancode)为按下某按键,其中scancode为键盘扫描码,大小为一个字节,通常两位16进制表示。

具体对应的扫描码可见:https://doc.wendoc.com/bcff0538d279995979873e7a4.html

import rabird.winioimport timeimport atexit# KeyBoard Commands# Command portKBC_KEY_CMD = 0x64# Data portKBC_KEY_DATA = 0x60__winio = Nonedef __get_winio():    global __winio    if __winio is None:        __winio = rabird.winio.WinIO()        def __clear_winio():            global __winio            __winio = None        atexit.register(__clear_winio)    return __winiodef wait_for_buffer_empty():    '''    Wait keyboard buffer empty    '''    winio = __get_winio()    dwRegVal = 0x02    while (dwRegVal & 0x02):        dwRegVal = winio.get_port_byte(KBC_KEY_CMD)def key_down(scancode):    winio = __get_winio()    wait_for_buffer_empty();    winio.set_port_byte(KBC_KEY_CMD, 0xd2);    wait_for_buffer_empty();    scancode = int(scancode)    winio.set_port_byte(KBC_KEY_DATA, scancode)def SPkey_down(scancode):    winio = __get_winio()    wait_for_buffer_empty();    winio.set_port_byte(KBC_KEY_CMD, 0xd2);    wait_for_buffer_empty();    winio.set_port_byte(KBC_KEY_DATA, 0xe0)    wait_for_buffer_empty();    winio.set_port_byte(KBC_KEY_CMD, 0xd2);    wait_for_buffer_empty();    winio.set_port_byte(KBC_KEY_DATA, scancode)def key_up(scancode):    winio = __get_winio()    wait_for_buffer_empty();    winio.set_port_byte(KBC_KEY_CMD, 0xd2);    wait_for_buffer_empty();    scancode = int(scancode)    winio.set_port_byte(KBC_KEY_DATA, scancode | 0x80);def SPkey_up(scancode):    winio = __get_winio()    wait_for_buffer_empty();    winio.set_port_byte(KBC_KEY_CMD, 0xd2);    wait_for_buffer_empty();    winio.set_port_byte(KBC_KEY_DATA, 0xe0)    wait_for_buffer_empty();    winio.set_port_byte(KBC_KEY_CMD, 0xd2);    wait_for_buffer_empty();    winio.set_port_byte(KBC_KEY_DATA, scancode | 0x80)def mouse_down():    winio = __get_winio()    wait_for_buffer_empty();    winio.set_port_byte(KBC_KEY_CMD, 0xd3);    wait_for_buffer_empty();    winio.set_port_dword(KBC_KEY_DATA, 0x09)def mouse_up():    winio = __get_winio()    wait_for_buffer_empty();    winio.set_port_byte(KBC_KEY_CMD, 0xd3);    wait_for_buffer_empty();    winio.set_port_dword(KBC_KEY_DATA, 0x08)def key_press(scancode, press_time=0.05):    key_down(scancode)    time.sleep(press_time)    key_up(scancode)    time.sleep(press_time)def SPkey_press(scancode, press_time=0.05):    SPkey_down(scancode)    time.sleep(press_time)    SPkey_up(scancode)    time.sleep(press_time)def mouse_clicked(clicked_time=0.05):    mouse_down()    time.sleep(clicked_time)    mouse_up()    time.sleep(clicked_time)

1、Keyboard库

该库可以实现键盘的监听,可通过pip install keyboard安装。(他的父类库 pynput 可以实现鼠标监听)

keyboard.wait('a')# 监听等待键盘按下 指定 键 ,只有按下指定键才会执行后续代码。不然程序会一直处于阻塞状态。 keyboard.wait()  # 其值为空时会进入永久性的阻塞状态 keyboard.add_hotkey(hotkey='q', callback=print, args=('b',))# 添加热键监听任务,监听的热键可以是任何值或者组合值,当监听到指定键时调用callback函数,args是可选的,调用函数并将指定值传进去  a = keyboard.KeyboardEvent('down', 28, 'enter')# 封装一个键盘事件,可用于后续对比想要的键盘事件print(a.name)  # 触发键的名称print(a.time)  # 触发键的时间print(a.event_type)  # 触发键的类型(down/up)按下/松开print(a.scan_code)  # 触发键的代码   keyboard.hook(lambda x: print(x))# 监听所有键,当任意键按下或松开时都会调用一次指定函数,并且将此次按下或松开的键的状态传递给被调函数 keyboard.on_press(lambda x: print(x))# 监听所有键,当任意键按下或长按(一直触发指定函数)时都会调用一次指定函数,并且将此次按下的键的状态传递给被调函数 # 配合无限等待使得程序不终止,一直监听热键。keyboard.wait()# wait里也可以设置按键,说明当按到该键时结束 recorded = keyboard.record(until='esc')# # 程序进入阻塞,直到按下 esc 键才会结束这句代码的调用,并且返回监听其间按下的所有键盘的键print(recorded)

来源地址:https://blog.csdn.net/Salvator_/article/details/131881423

阅读原文内容投诉

免责声明:

① 本站未注明“稿件来源”的信息均来自网络整理。其文字、图片和音视频稿件的所属权归原作者所有。本站收集整理出于非商业性的教育和科研之目的,并不意味着本站赞同其观点或证实其内容的真实性。仅作为临时的测试数据,供内部测试之用。本站并未授权任何人以任何方式主动获取本站任何信息。

② 本站未注明“稿件来源”的临时测试数据将在测试完成后最终做删除处理。有问题或投稿请发送至: 邮箱/279061341@qq.com QQ/279061341

软考中级精品资料免费领

  • 历年真题答案解析
  • 备考技巧名师总结
  • 高频考点精准押题
  • 2024年上半年信息系统项目管理师第二批次真题及答案解析(完整版)

    难度     813人已做
    查看
  • 【考后总结】2024年5月26日信息系统项目管理师第2批次考情分析

    难度     354人已做
    查看
  • 【考后总结】2024年5月25日信息系统项目管理师第1批次考情分析

    难度     318人已做
    查看
  • 2024年上半年软考高项第一、二批次真题考点汇总(完整版)

    难度     435人已做
    查看
  • 2024年上半年系统架构设计师考试综合知识真题

    难度     224人已做
    查看

相关文章

发现更多好内容

猜你喜欢

AI推送时光机
位置:首页-资讯-后端开发
咦!没有更多了?去看看其它编程学习网 内容吧
首页课程
资料下载
问答资讯