Как я могу реализовать движение указателя мыши с отслеживанием глаз в openCV & Python? - PullRequest
Новая
       19

Как я могу реализовать движение указателя мыши с отслеживанием глаз в openCV & Python?

0 голосов
/ 03 апреля 2019

Я довольно новичок в Python и OpenCV и работаю над созданием системы слежения за глазами для перемещения указателя мыши. Пока что мой сценарий может распознавать зрачка, и он отслеживает положение зрачка, но я не уверен, как назначить движение мыши положению зрачка.

Я использую opencv 4.0.0, python 2.7 и numpy. Я нашел несколько ответов, таких как этот Как я могу двигать мышь по обнаруженному лицу и глазу, используя OpenCV и Python , но я не очень уверен, как реализовать решение в моем сценарии, так как у меня нет обнаружение лица и глаз. 

while True:
    ret, frame = cap.read()
    if ret is False:
        break

    roi = frame[20: 300, 27: 396]
    rows, cols, _ = roi.shape
    gray_roi = cv2.cvtColor(roi, cv2.COLOR_BGR2GRAY)
    #gray_roi = cv2.GaussianBlur(gray_roi, (7, 7), 0)

    _, threshold = cv2.threshold(gray_roi, 22, 255, cv2.THRESH_BINARY_INV)
    contours, hierarchy = cv2.findContours(threshold, cv2.RETR_TREE, cv2.CHAIN_APPROX_SIMPLE)

    contours = sorted(contours, key=lambda x: cv2.contourArea(x), reverse=True)

    for cnt in contours:
        (x, y, w, h) = cv2.boundingRect(cnt)

        cv2.drawContours(roi, [cnt], -1, (0, 0, 255), 3)
        cv2.rectangle(roi, (x, y), (x + w, y + h), (255, 0, 0), 2)
        cv2.line(roi, (x + int(w/2), 0), (x + int(w/2), rows), (0, 255, 0), 2)
        cv2.line(roi, (0, y + int(h/2)), (cols, y + int(h/2)), (0, 255, 0), 2)
        break

    cv2.imshow("Threshold", threshold)
    cv2.imshow("gray roi", gray_roi)
    cv2.imshow("Roi", roi)
    key = cv2.waitKey(30)
    if key == 27:
        break

cv2.destroyAllWindows()

Любая помощь приветствуется, спасибо!

1 Ответ

0 голосов
/ 03 апреля 2019

Посмотрите этот блог, в котором показано, как создать обнаружение моргания глаз с помощью OpenCV, Python и dlib https://www.pyimagesearch.com/2017/04/24/eye-blink-detection-opencv-python-dlib/

...