Как использовать InjectTouchInput в Python для нескольких касаний - PullRequest
Новая
       8

Как использовать InjectTouchInput в Python для нескольких касаний

0 голосов
/ 27 октября 2018

Я пытаюсь использовать InjectTouchInput для имитации нескольких касаний на экране.

Все хорошо, когда у меня всего одно касание, но в более чем одном случае я застрял в проблеме преобразования типов

Вот код теста: 

class POINTER_INFO(Structure):
_fields_=[("pointerType",c_uint32),
          ("pointerId",c_uint32),
          ("frameId",c_uint32),
          ("pointerFlags",c_int),
          ("sourceDevice",HANDLE),
          ("hwndTarget",HWND),
          ("ptPixelLocation",POINT),
          ("ptHimetricLocation",POINT),
          ("ptPixelLocationRaw",POINT),
          ("ptHimetricLocationRaw",POINT),
          ("dwTime",DWORD),
          ("historyCount",c_uint32),
          ("inputData",c_int32),
          ("dwKeyStates",DWORD),
          ("PerformanceCount",c_uint64),
          ("ButtonChangeType",c_int)
          ]

class POINTER_TOUCH_INFO(Structure):
_fields_=[("pointerInfo",POINTER_INFO),
          ("touchFlags",c_int),
          ("touchMask",c_int),
          ("rcContact", RECT),
          ("rcContactRaw",RECT),
          ("orientation", c_uint32),
          ("pressure", c_uint32)]


ntouch=2

if (windll.user32.InitializeTouchInjection(ntouch,TOUCH_FEEDBACK_INDIRECT) ==  False): 
    print ("Initialized Touch Injection Error")

tinfo = [POINTER_TOUCH_INFO() for i in range(ntouch)]

tinfo[0].pointerInfo.pointerType = PT_TOUCH
tinfo[0].pointerInfo.pointerId = 0
tinfo[0].pointerInfo.ptPixelLocation.y = 1000
tinfo[0].pointerInfo.ptPixelLocation.x = 500

tinfo[0].touchFlags = TOUCH_FLAG_NONE
tinfo[0].touchMask = TOUCH_MASK_ALL
tinfo[0].orientation = 90;
tinfo[0].pressure = 32000;
tinfo[0].rcContact.top = tinfo[0].pointerInfo.ptPixelLocation.y - 2;
tinfo[0].rcContact.bottom = tinfo[0].pointerInfo.ptPixelLocation.y + 2;
tinfo[0].rcContact.left = tinfo[0].pointerInfo.ptPixelLocation.x  - 2;
tinfo[0].rcContact.right = tinfo[0].pointerInfo.ptPixelLocation.x  + 2;

tinfo[0].pointerInfo.pointerFlags=POINTER_FLAG_DOWN | POINTER_FLAG_INRANGE | POINTER_FLAG_INCONTACT)

tinfo[1].pointerInfo.pointerType = PT_TOUCH
tinfo[1].pointerInfo.pointerId = 1
tinfo[1].pointerInfo.ptPixelLocation.y = 900
tinfo[1].pointerInfo.ptPixelLocation.x = 300

tinfo[1].touchFlags = TOUCH_FLAG_NONE
tinfo[1].touchMask = TOUCH_MASK_ALL
tinfo[1].orientation = 90;
tinfo[1].pressure = 32000;
tinfo[1].rcContact.top = tinfo[1].pointerInfo.ptPixelLocation.y - 2;
tinfo[1].rcContact.bottom = tinfo[1].pointerInfo.ptPixelLocation.y + 2;
tinfo[1].rcContact.left = tinfo[1].pointerInfo.ptPixelLocation.x  - 2;
tinfo[1].rcContact.right = tinfo[1].pointerInfo.ptPixelLocation.x  + 2;

tinfo[1].pointerInfo.pointerFlags=(POINTER_FLAG_DOWN | POINTER_FLAG_INRANGE | POINTER_FLAG_INCONTACT)

if (windll.user32.InjectTouchInput(ntouch, ctypes.byref(tinfo))==0):    
    print (" Error: "+ ctypes.FormatError())

Функция InjectTouchInput возвращает следующую ошибку:

Аргумент TypeError: byref () должен быть экземпляром ctypes,не 'список'

Я уже пробовал использовать кастинг, передавая результат:

tinfop = (ctypes.Structure * ntouch) (* tinfo)

но в этом случае он возвращает:

TypeError: _type_ должен иметь информацию о хранилище

Если ntouch = 1 (одно касание), код работает нормально.

Примеры, которые мне удалось найти, это только c ++ (https://stackoverflow.com/questions/20875283/why-is-only-one-touch-being-injected-when-using-touch-injection-api-with-win8 или Python с одним касанием.

В принципе, я думаю, что я ищу способ преобразования списка структурыв указатель на их первый элемент.

1 Ответ

0 голосов
/ 27 октября 2018

Я решил проблему, изменив определение tinfo следующим образом: 

tinfo = (POINTER_TOUCH_INFO * ntouch)()

Эта ссылка была полезной: Передача массива struct из Python в dll

...