использование pocketsphinx в python3 для обнаружения грамматики - PullRequest
Новая
       27

использование pocketsphinx в python3 для обнаружения грамматики

0 голосов
/ 04 февраля 2020

У меня вопрос, как настроить декодер в python3, чтобы я мог использовать файл грамматики для обнаружения.

Что я получил до сих пор:

Я создал очень простой файл грамматики (имя jsgf_file), похожий на этот: 

#JSGF V1.0;
grammar hello;
public <light> = (light | tv)  ( on | off );

Использование этого с pocketsphinx_continuous -inmic yes -jsgf jsgf_file действительно работает действительно хорошо.

У меня также есть карманный сфинкс в python3 для работы с определением ключевых слов, в данном случае «компьютер»: 

import sys, os, pyaudio
from pocketsphinx.pocketsphinx import *
from pocketsphinx import get_model_path
from sphinxbase.sphinxbase import *

modeldir = get_model_path()

# Create a decoder with certain model
config = Decoder.default_config()
config.set_string('-hmm', os.path.join(modeldir, 'en-us'))
config.set_string('-dict', os.path.join(modeldir, 'cmudict-en-us.dict'))

config.set_string('-keyphrase', 'computer')

p = pyaudio.PyAudio()
stream = p.open(format=pyaudio.paInt16, channels=1, rate=16000, input=True, frames_per_buffer=1024)
stream.start_stream()

# Process audio chunk by chunk. On keyword detected perform action and restart search
decoder = Decoder(config)
decoder.start_utt()
while True:
    buf = stream.read(1024)

    decoder.process_raw(buf, False, False)

    if decoder.hyp() != None:
        print ([(seg.word, seg.prob, seg.start_frame, seg.end_frame) for seg in decoder.seg()])
        print ("Detected keyword, restarting search")
        #
        # Here you run the code you want based on keyword
        #
        decoder.end_utt()
        decoder.start_utt()

Даже это работает очень хорошо.

Но как мне изменить этот код, чтобы он работал, используя детектор грамматики вместо ключевого слова?

Я нашел два потенциальных источника, которые могут помочь:

...