Интеграция прямой речи в Microsoft Virtual Assistant?

Question

Я делал POC для Microsoft Virtual Assistant, используя их шаблон в качестве базы в c # (можно найти здесь: https://github.com/microsoft/botframework-solutions). Я развернул свой код в Azure, добавил и развернул некоторые навыки и уже используюприложение в эмуляторе Bot Framework для успешного тестирования.

Теперь я хочу добавить сценарий, в котором пользователь может использовать виртуальный помощник, используя громкую связь, используя голос. Я читал, что Direct LineРечь - путь к этому, но у меня было двойное начало.

Я создал прямой речевой канал в своем лазурном веб-приложении. Затем я следовал этим инструкциям: https://docs.microsoft.com/en-us/azure/bot-service/bot-service-channel-connect-directlinespeech?view=azure-bot-service-4.0 https://docs.microsoft.com/en-us/azure/bot-service/directline-speech-bot?view=azure-bot-service-4.0

Мне кажется, что какая-то информация отсутствует, поскольку секрет речи с прямой линией вообще не упоминается в руководстве "Использование речи с прямой линией в вашем боте".

Любой, у кого есть опытв этом была бы большая помощь, большое спасибо.

Answer 1

Для всех, кто мог бы искать это позже, я обнаружил, что моей основной проблемой было то, что я использовал реализацию веб-чата, которая в настоящее время не поддерживается предварительным просмотром речи в прямой линии.

Для правильной интеграции речи в веб-чат я смог найти несколько примеров реализации веб-чата от Microsoft здесь . В частности, два примера, которые я нашел наиболее полезными, - это реализация речи с использованием встроенных методов браузера в этом примере решения , а затем с использованием Microsoft Cognitive Services в этом решении .