Итак, я увидел программу, которая запускалась и отвечала на вопросы во время записи ошибок в базу данных, чтобы она могла учиться на ошибках.Мне было интересно, если кто-то пытался сделать один или уже был успешным?
Я начал пытаться сделать в Python с pynuput для имитации щелчков мыши, cv2 для записи экрана, чтобы обнаружить текст и определить, если он выбранправильный (например, если правильный ответ стал зеленым), но это своего рода то место, где я застрял и задавался вопросом, знает ли кто-нибудь, является ли такая система чем-то простым?Я, вероятно, не буду предоставлять код, так как он не очень хороший и немного бессмысленный
опять мой код не велик, но то, что я сделал для cv2 для справки, было
def screen_record():
last_time = time.time()
while(True):
# 800x600 windowed mode
printscreen = np.array(ImageGrab.grab(bbox=(500,100,1400,800)))
print('loop took {} seconds'.format(time.time()-last_time))
last_time = time.time()
cv2.imshow('window',cv2.cvtColor(printscreen, cv2.COLOR_BGR2RGB))
if cv2.waitKey(25) & 0xFF == ord('q'):
cv2.destroyAllWindows()
break
Ну, экранзаписывающие работы