Neste código, estou usando Python 2.7.13, OpenCV 2.4.13 e PyAutoGUI 0.9.36. O objetivo é mover o cursor de acordo com o movimento facial, mas o movimento do cursor é invertido. Por exemplo, se meu rosto for para a direita, o cursor se moverá para a esquerda e se meu rosto for para a esquerda, o cursor será para a direita. Além disso, quero que o cursor se mova para a direita, esquerda, para cima e para baixo em toda a tela do meu PC, cujo tamanho é x = 1920, y = 1080.

O objetivo deste programa é mostrar que é possível obter uma nova maneira de adquirir mais independência e acesso para que pessoas com tetraplegia sejam capazes de realizar atividades simples, que fazem parte da rotina de milhões de pessoas, como transformar a luz acende e apaga e liga e desliga a TV.

import cv2
import pyautogui

faceCascade = cv2.CascadeClassifier('haarcascade_frontalface_default.xml')

video_capture = cv2.VideoCapture(0)

while True:
    # Capture frame-by-frame
    ret, frame = video_capture.read()

    gray = cv2.cvtColor(frame, cv2.COLOR_BGR2GRAY)
    faces = faceCascade.detectMultiScale(
        gray,
        scaleFactor=1.3,
        minNeighbors=5,
        minSize=(80, 80),
        flags=cv2.cv.CV_HAAR_SCALE_IMAGE
    )

    #print 'faces: ', faces

    # Draw a rectangle around the faces
    for (x, y, w, h) in faces:
        cv2.rectangle(frame, (x, y), (x+w, y+h), (0, 0, 255), 3)

    #width, height = pyautogui.size()
    #cursorx, cursory = pyautogui.position()
    #posx = width - cursorx
    #posy = cursory
    pyautogui.moveTo(x+w, y+h)

    # Display the resulting frame
    #cv2.imshow('Video', frame)
    rimg = cv2.flip(frame,1) #invert the object frame
    cv2.imshow("vertical flip", rimg) 

    if cv2.waitKey(1) & 0xFF == ord('q'):
        break
# When everything is done, release the capture
video_capture.release()
cv2.destroyAllWindows()