Как управлять мышью в Mac с помощью Python?

Question

Какой самый простой способ перемещения мыши (и, возможно, щелчка) с помощью Python на OS X?

Это просто для быстрого прототипирования, оно не должно быть элегантным.

Answer 1

Попробуйте код на этой странице . Он определяет пару функций mousemove и mouseclick, которые подключаются к интеграции Apple между Python и библиотеками Quartz платформы.

Этот код работает на 10.6, и я использую его на 10.7. Хорошая особенность этого кода в том, что он генерирует события мыши, чего нет в некоторых решениях. Я использую его для управления BBC iPlayer, отправляя события мыши на известные позиции кнопок в их проигрывателе Flash (я знаю, что это очень хрупко) В частности, необходимы события перемещения мыши, так как в противном случае проигрыватель Flash никогда не скрывает курсор мыши. Такие функции, как CGWarpMouseCursorPosition не будут делать это.

from Quartz.CoreGraphics import CGEventCreateMouseEvent
from Quartz.CoreGraphics import CGEventPost
from Quartz.CoreGraphics import kCGEventMouseMoved
from Quartz.CoreGraphics import kCGEventLeftMouseDown
from Quartz.CoreGraphics import kCGEventLeftMouseDown
from Quartz.CoreGraphics import kCGEventLeftMouseUp
from Quartz.CoreGraphics import kCGMouseButtonLeft
from Quartz.CoreGraphics import kCGHIDEventTap

def mouseEvent(type, posx, posy):
        theEvent = CGEventCreateMouseEvent(
                    None, 
                    type, 
                    (posx,posy), 
                    kCGMouseButtonLeft)
        CGEventPost(kCGHIDEventTap, theEvent)

def mousemove(posx,posy):
        mouseEvent(kCGEventMouseMoved, posx,posy);

def mouseclick(posx,posy):
        # uncomment this line if you want to force the mouse 
        # to MOVE to the click location first (I found it was not necessary).
        #mouseEvent(kCGEventMouseMoved, posx,posy);
        mouseEvent(kCGEventLeftMouseDown, posx,posy);
        mouseEvent(kCGEventLeftMouseUp, posx,posy);

Вот пример кода со страницы выше:

##############################################################
#               Python OSX MouseClick
#       (c) 2010 Alex Assouline, GeekOrgy.com
##############################################################
import sys
try:
        xclick=intsys.argv1
        yclick=intsys.argv2
        try:
                delay=intsys.argv3
        except:
                delay=0
except:
        print "USAGE mouseclick [int x] [int y] [optional delay in seconds]"
        exit
print "mouse click at ", xclick, ",", yclick," in ", delay, "seconds"
# you only want to import the following after passing the parameters check above, because importing takes time, about 1.5s
# (why so long!, these libs must be huge : anyone have a fix for this ?? please let me know.)
import time
from Quartz.CoreGraphics import CGEventCreateMouseEvent
from Quartz.CoreGraphics import CGEventPost
from Quartz.CoreGraphics import kCGEventMouseMoved
from Quartz.CoreGraphics import kCGEventLeftMouseDown
from Quartz.CoreGraphics import kCGEventLeftMouseDown
from Quartz.CoreGraphics import kCGEventLeftMouseUp
from Quartz.CoreGraphics import kCGMouseButtonLeft
from Quartz.CoreGraphics import kCGHIDEventTap
def mouseEventtype, posx, posy:
        theEvent = CGEventCreateMouseEventNone, type, posx,posy, kCGMouseButtonLeft
        CGEventPostkCGHIDEventTap, theEvent
def mousemoveposx,posy:
        mouseEventkCGEventMouseMoved, posx,posy;
def mouseclickposx,posy:
        #mouseEvent(kCGEventMouseMoved, posx,posy); #uncomment this line if you want to force the mouse to MOVE to the click location first (i found it was not necesary).
        mouseEventkCGEventLeftMouseDown, posx,posy;
        mouseEventkCGEventLeftMouseUp, posx,posy;
time.sleepdelay;
mouseclickxclick, yclick;
print "done."

Answer 2

Просто попробуйте этот код:

#!/usr/bin/python

import objc

class ETMouse():    
    def setMousePosition(self, x, y):
        bndl = objc.loadBundle('CoreGraphics', globals(), 
                '/System/Library/Frameworks/ApplicationServices.framework')
        objc.loadBundleFunctions(bndl, globals(), 
                [('CGWarpMouseCursorPosition', 'v{CGPoint=ff}')])
        CGWarpMouseCursorPosition((x, y))

if __name__ == "__main__":
    et = ETMouse()
    et.setMousePosition(200, 200)

работает в OSX Leopard 10.5.6

Answer 3

Я копался в исходном коде Synergy, чтобы найти вызов, который генерирует события мыши:

#include <ApplicationServices/ApplicationServices.h>

int to(int x, int y)
{
    CGPoint newloc;
    CGEventRef eventRef;
    newloc.x = x;
    newloc.y = y;

    eventRef = CGEventCreateMouseEvent(NULL, kCGEventMouseMoved, newloc,
                                        kCGMouseButtonCenter);
    //Apparently, a bug in xcode requires this next line
    CGEventSetType(eventRef, kCGEventMouseMoved);
    CGEventPost(kCGSessionEventTap, eventRef);
    CFRelease(eventRef);

    return 0;
}

Теперь, чтобы написать привязки Python!

Answer 4

Когда я хотел это сделать, я установил Jython и использовал класс java.awt.Robot. Если вам нужно сделать скрипт на CPython, это явно не подходит, но когда вы можете выбирать что-либо, это хорошее кроссплатформенное решение.

import java.awt

robot = java.awt.Robot()

robot.mouseMove(x, y)
robot.mousePress(java.awt.event.InputEvent.BUTTON1_MASK)
robot.mouseRelease(java.awt.event.InputEvent.BUTTON1_MASK)

Answer 5

Библиотека pynput кажется лучшей в настоящее время поддерживаемой библиотекой. Позволяет контролировать и контролировать устройства ввода.

Вот пример управления мышью:

from pynput.mouse import Button, Controller

mouse = Controller()

# Read pointer position
print('The current pointer position is {0}'.format(
    mouse.position))

# Set pointer position
mouse.position = (10, 20)
print('Now we have moved it to {0}'.format(
    mouse.position))

# Move pointer relative to current position
mouse.move(5, -5)

# Press and release
mouse.press(Button.left)
mouse.release(Button.left)

# Double click; this is different from pressing and releasing
# twice on Mac OSX
mouse.click(Button.left, 2)

# Scroll two steps down
mouse.scroll(0, 2)

Answer 6

Самый простой способ - использовать PyAutoGUI.
Пример:

• Чтобы получить положение мыши:

  >>> pyautogui.position()
  (187, 567)
  

• Чтобы переместить мышь в определенную позицию:
  

  >>> pyautogui.moveTo(100,200)
  

• Для вызова мыши:
  

  >>> pyautogui.click()
  

Подробнее: PyAutoGUI

Answer 7

Лучше всего использовать пакет AutoPy . Он чрезвычайно прост в использовании и кроссплатформенен для загрузки.

Чтобы переместить курсор в позицию (200,200):

import autopy
autopy.mouse.move(200,200)

Answer 8

Сценарий python от geekorgy.com великолепен, за исключением того, что я столкнулся с несколькими трудностями, поскольку установил более новую версию python. Вот несколько советов для тех, кто ищет решение.

Если вы установили Python 2.7 на Mac OS 10.6, у вас есть несколько вариантов получения Python для импорта из Quartz.CoreGraphics:

A) В терминале введите python2.6 вместо просто python перед путем к сценарию

B) Вы можете установить PyObjC , выполнив следующие действия:

1. Установить easy_install из http://pypi.python.org/pypi/setuptools
2. В терминале введите which python и скопируйте путь до 2.7

3. Затем введите easy_install –-prefix /Path/To/Python/Version pyobjc==2.3

   ** т. easy_install –-prefix /Library/Frameworks/Python.framework/Versions/2.7 pyobjc==2.3

4. Внутри скрипта введите import objc вверху

5. Если easy_install не работает в первый раз, вам может понадобиться сначала установить ядро:

   ** т. easy_install --prefix /Library/Frameworks/Python.framework/Versions/2.7 pyobjc-core==2.3

C) Вы можете сбросить ваш путь Python на исходный Python для Mac OS:

• В терминале введите: defaults write com.apple.versioner.python Version 2.6

*** Кроме того, быстрый способ узнать координаты (x, y) на экране:

1. Нажмите Command+Shift+4 (выбор экрана)
2. Затем курсор показывает координаты
3. Затем нажмите Esc, чтобы выйти из него.

Answer 9

Вот полный пример использования библиотеки Quartz:

#!/usr/bin/python
import sys
from AppKit import NSEvent
import Quartz

class Mouse():
    down = [Quartz.kCGEventLeftMouseDown, Quartz.kCGEventRightMouseDown, Quartz.kCGEventOtherMouseDown]
    up = [Quartz.kCGEventLeftMouseUp, Quartz.kCGEventRightMouseUp, Quartz.kCGEventOtherMouseUp]
    [LEFT, RIGHT, OTHER] = [0, 1, 2]

    def position(self):
        point = Quartz.CGEventGetLocation( Quartz.CGEventCreate(None) )
        return point.x, point.y

    def location(self):
        loc = NSEvent.mouseLocation()
        return loc.x, Quartz.CGDisplayPixelsHigh(0) - loc.y

    def move(self, x, y):
        moveEvent = Quartz.CGEventCreateMouseEvent(None, Quartz.kCGEventMouseMoved, (x, y), 0)
        Quartz.CGEventPost(Quartz.kCGHIDEventTap, moveEvent)

    def press(self, x, y, button=1):
        event = Quartz.CGEventCreateMouseEvent(None, Mouse.down[button], (x, y), button - 1)
        Quartz.CGEventPost(Quartz.kCGHIDEventTap, event)

    def release(self, x, y, button=1):
        event = Quartz.CGEventCreateMouseEvent(None, Mouse.up[button], (x, y), button - 1)
        Quartz.CGEventPost(Quartz.kCGHIDEventTap, event)

    def click(self, button=LEFT):
        x, y = self.position()
        self.press(x, y, button)
        self.release(x, y, button)

    def click_pos(self, x, y, button=LEFT):
        self.move(x, y)
        self.click(button)

    def to_relative(self, x, y):
        curr_pos = Quartz.CGEventGetLocation( Quartz.CGEventCreate(None) )
        x += current_position.x;
        y += current_position.y;
        return [x, y]

    def move_rel(self, x, y):
        [x, y] = to_relative(x, y)
        moveEvent = Quartz.CGEventCreateMouseEvent(None, Quartz.kCGEventMouseMoved, Quartz.CGPointMake(x, y), 0)
        Quartz.CGEventPost(Quartz.kCGHIDEventTap, moveEvent)

^{Приведенный выше код основан на следующих исходных файлах: Mouse.pymouseUtils.py.}

Вот демонстрационный код с использованием вышеуказанного класса:

# DEMO
if __name__ == '__main__':
    mouse = Mouse()
    if sys.platform == "darwin":
        print("Current mouse position: %d:%d" % mouse.position())
        print("Moving to 100:100...");
        mouse.move(100, 100)
        print("Clicking 200:200 position with using the right button...");
        mouse.click_pos(200, 200, mouse.RIGHT)
    elif sys.platform == "win32":
        print("Error: Platform not supported!")

Вы можете объединить оба блока кода в один файл, дать разрешение на выполнение и запустить его как сценарий оболочки.

Answer 10

Используйте CoreGraphics из библиотеки Quartz, например:

from Quartz.CoreGraphics import CGEventCreate
from Quartz.CoreGraphics import CGEventGetLocation
ourEvent = CGEventCreate(None);
currentpos = CGEventGetLocation(ourEvent);
mousemove(currentpos.x,currentpos.y)

^{Источник: Тони комментарий на странице Geekorgy .}