web-dev-qa-db-ja.com

シミュレーションPythonゲームを制御するためのキープレス

私はKinectとPythonを使用してゲーム（私の2つのテストゲームはHalf Life 2とMinecraftです）を制御しようとしています。 1つのことを除いてすべてが機能します。ゲームは、シミュレートされたマウスイベントとシミュレートされたマウスの動きに応答します（マウスイベントはctypesを介して行われ、マウスの動きはpywin32を使用して行われます）。しかし問題は、ゲームがシミュレートされたキープレスを無視することです。どちらもチャットウィンドウ（Minecraft）または開発者コンソール（Half Life 2）のいずれかでシミュレートされたキープレスを取得しますが、実際のゲームのプレイ中は取得しません。

私はキープレスを送信するいくつかの方法を試しました：

import win32com.client as client
wsh = client.Dispatch('WScript.Shell')
wsh.AppActivate(gameName)
wsh.SendKeys(key)

そして：

import win32api
win32api.keybd_event(keyHexCode, 0, 0)

そして：

import ctypes
import time

SendInput = ctypes.windll.user32.SendInput

# C struct redefinitions 
PUL = ctypes.POINTER(ctypes.c_ulong)
class KeyBdInput(ctypes.Structure):
    _fields_ = [("wVk", ctypes.c_ushort),
                ("wScan", ctypes.c_ushort),
                ("dwFlags", ctypes.c_ulong),
                ("time", ctypes.c_ulong),
                ("dwExtraInfo", PUL)]

class HardwareInput(ctypes.Structure):
    _fields_ = [("uMsg", ctypes.c_ulong),
                ("wParamL", ctypes.c_short),
                ("wParamH", ctypes.c_ushort)]

class MouseInput(ctypes.Structure):
    _fields_ = [("dx", ctypes.c_long),
                ("dy", ctypes.c_long),
                ("mouseData", ctypes.c_ulong),
                ("dwFlags", ctypes.c_ulong),
                ("time",ctypes.c_ulong),
                ("dwExtraInfo", PUL)]

class Input_I(ctypes.Union):
    _fields_ = [("ki", KeyBdInput),
                 ("mi", MouseInput),
                 ("hi", HardwareInput)]

class Input(ctypes.Structure):
    _fields_ = [("type", ctypes.c_ulong),
                ("ii", Input_I)]

# Actuals Functions

def PressKey(hexKeyCode):

    extra = ctypes.c_ulong(0)
    ii_ = Input_I()
    ii_.ki = KeyBdInput( hexKeyCode, 0x48, 0, 0, ctypes.pointer(extra) )
    x = Input( ctypes.c_ulong(1), ii_ )
    ctypes.windll.user32.SendInput(1, ctypes.pointer(x), ctypes.sizeof(x))

def ReleaseKey(hexKeyCode):

    extra = ctypes.c_ulong(0)
    ii_ = Input_I()
    ii_.ki = KeyBdInput( hexKeyCode, 0x48, 0x0002, 0, ctypes.pointer(extra) )
    x = Input( ctypes.c_ulong(1), ii_ )
    ctypes.windll.user32.SendInput(1, ctypes.pointer(x), ctypes.sizeof(x))

最後のコードは私のものではないことを指摘しておきます。スタックオーバーフローに関する別の質問です。

これらのどれも機能しない理由と、これを行う正しい方法は何か知っている人はいますか？

pythonpython-2.7keypresssimulate
30
user573949

Half-Life 2でキープレスをシミュレートしようとして同じ問題が発生しました。Robinが言ったように、解決策はVKの代わりにScanCodeを使用することです。

ScanCodeを使用するように最後のコード例を編集しました。 Half-Life 2で試してみましたが、問題なく動作しました。

import ctypes
import time

SendInput = ctypes.windll.user32.SendInput

# C struct redefinitions 
PUL = ctypes.POINTER(ctypes.c_ulong)
class KeyBdInput(ctypes.Structure):
    _fields_ = [("wVk", ctypes.c_ushort),
                ("wScan", ctypes.c_ushort),
                ("dwFlags", ctypes.c_ulong),
                ("time", ctypes.c_ulong),
                ("dwExtraInfo", PUL)]

class HardwareInput(ctypes.Structure):
    _fields_ = [("uMsg", ctypes.c_ulong),
                ("wParamL", ctypes.c_short),
                ("wParamH", ctypes.c_ushort)]

class MouseInput(ctypes.Structure):
    _fields_ = [("dx", ctypes.c_long),
                ("dy", ctypes.c_long),
                ("mouseData", ctypes.c_ulong),
                ("dwFlags", ctypes.c_ulong),
                ("time",ctypes.c_ulong),
                ("dwExtraInfo", PUL)]

class Input_I(ctypes.Union):
    _fields_ = [("ki", KeyBdInput),
                 ("mi", MouseInput),
                 ("hi", HardwareInput)]

class Input(ctypes.Structure):
    _fields_ = [("type", ctypes.c_ulong),
                ("ii", Input_I)]

# Actuals Functions

def PressKey(hexKeyCode):
    extra = ctypes.c_ulong(0)
    ii_ = Input_I()
    ii_.ki = KeyBdInput( 0, hexKeyCode, 0x0008, 0, ctypes.pointer(extra) )
    x = Input( ctypes.c_ulong(1), ii_ )
    ctypes.windll.user32.SendInput(1, ctypes.pointer(x), ctypes.sizeof(x))

def ReleaseKey(hexKeyCode):
    extra = ctypes.c_ulong(0)
    ii_ = Input_I()
    ii_.ki = KeyBdInput( 0, hexKeyCode, 0x0008 | 0x0002, 0, ctypes.pointer(extra) )
    x = Input( ctypes.c_ulong(1), ii_ )
    ctypes.windll.user32.SendInput(1, ctypes.pointer(x), ctypes.sizeof(x))

# directx scan codes http://www.gamespp.com/directx/directInputKeyboardScanCodes.html
while (True):
    PressKey(0x11)
    time.sleep(1)
    ReleaseKey(0x11)
    time.sleep(1)
30
hodka

ゲームがDirectInputデバイスを使用している可能性があります。

したがって、ゲームはDirectInputキーが押されることを期待しています。 このフォーラムスレッド の最後の投稿によると、DirectInputはVKではなくScanCodeに応答します。 このツール を使用して、DirectInputキーの送信を試すことができます。開発者はソースと詳細な説明も提供します。

これが機能する場合は、VKではなく適切なScanCodeを送信してみてください （（scancodesのリスト） 。

DirectX/DirectInputとのインターフェースを可能にする DirectPython と呼ばれる古いプロジェクトもあります。

3
Robin