Можем ли мы прочитать текст с выбранных объектов при моделировании восприятия

Question

Я автоматизирую приложение hololense с помощью моделирования восприятия. В одном из сценариев мне нужно выполнить действие щелчка по указанным c объектам на основе имени. Итак, можно ли прочитать текст выбранных объектов? (Примечание: я выбрал объекты, используя правую / легкую руку, и объект выбран с выделенным цветом)

Answer 1

Похоже, вы хотите построить автоматизацию тестирования для своего приложения или базы файлового проводника на эмуляторе Hololens2. И что ваше требование - заставить его автоматически касаться объекта с совпадающим именем в эмуляторе.

Если это так, эмулятор не поддерживает функцию распознавания текста или прямого возврата данных из памяти приложения. Однако вы можете предоставить дополнительную информацию о своем бизнес-запросе и отправить запрос функции через центр отзывов о запросе новой функции, который будет рассмотрен в будущих выпусках эмулятора HoloLens2.

Чтобы узнать, как отправить запрос обратной связи, вы можете следовать этому do c: Отправляйте отзывы в Microsoft с помощью приложения Feedback Hub.

Вне области разработки приложений HoloLens вы можете написать свою собственную программу для рабочего стола для захвата изображения в эмуляторе окна, а затем используйте технологию OCR, чтобы распознать символ на экране. Наконец, настройте свой ввод в симулятор в соответствии с результатом. Однако это не простой способ.