Можно ли использовать распознавание речи в приложении SpriteKit с помощью Swift? - PullRequest
Новая
       11

Можно ли использовать распознавание речи в приложении SpriteKit с помощью Swift?

0 голосов
/ 31 мая 2019

Я использую SpriteKit для создания приложения.Все остальные функции Scene выполняются через SpriteKit.Я хочу добавить распознавание речи в сцену так, чтобы, когда пользователь касается узла кнопки микрофона, слова, которые они говорят, сравнивались с правильным словом, которое они должны были сказать, чтобы двигаться дальше.Это возможно на SpriteKit?Приведенный ниже код - это функция, которую я использую, но она ничего не вызывает. 

func recordAndRecognizeSpeech() {
    let node = audioEngine.inputNode
    let recordingFormat = node.outputFormat(forBus: 0)
    node.installTap(onBus: 0, bufferSize: 1024, format: recordingFormat) { buffer, _ in
        self.request.append(buffer)
    }
    audioEngine.prepare()
    do {
        try audioEngine.start()
    } catch {
        self.sendAlert(message: "There has been an audio engine error.")
        return print(error)
    }
    guard let myRecognizer = SFSpeechRecognizer() else {
        self.sendAlert(message: "Speech recognition is not supported for your current locale.")
        return
    }
    if !myRecognizer.isAvailable {
        self.sendAlert(message: "Speech recognition is not currently available. Check back at a later time.")
        // Recognizer is not available right now
        return
    }
    recognitionTask = speechRecognizer?.recognitionTask(with: request, resultHandler: { result, error in
        if let result = result {

            let bestString = result.bestTranscription.formattedString
            self.labelNode.text = bestString

            var lastString: String = ""
            for segment in result.bestTranscription.segments {
                let indexTo = bestString.index(bestString.startIndex, offsetBy: segment.substringRange.location)
                lastString = bestString.substring(from: indexTo)
            }
            self.checkPhrase(resultString: lastString)
        } else if let error = error {
            self.sendAlert(message: "There has been a speech recognition error.")
            print(error)
        }
    })
}

Ниже приведен код, который я использую при касании узла микрофона, и ничего не происходит, когда я его запускаю: 

override func touchesBegan(_ touches: Set<UITouch>, with event: UIEvent?) {
    guard let touch = touches.first else { return }
    let location = touch.location(in: self)


    if micButton.contains(location) {
        if isRecording == true {
            audioEngine.stop()
            recognitionTask?.cancel()
            isRecording = false
        } else {
            self.recordAndRecognizeSpeech()
            isRecording = true
        }


    }

1 Ответ

0 голосов
/ 05 июня 2019

Вы можете использовать метод экземпляра requestRecordPermission (_:) для запроса разрешения пользователя на запись звука.

Попробуйте что-то вроде: 

if (session.respondsToSelector("requestRecordPermission:")){
    AVAudioSession.sharedInstance().requestRecordPermission({(granted: Bool)-> Void in
        if granted {
            println("granted")
            session.setCategory(AVAudioSessionCategoryPlayAndRecord, error: nil)
            session.setActive(true, error: nil)
            self.recorder ()
        }else{
            println("not granted")
        }
    })
}   session.setCategory(AVAudioSessionCategoryPlayAndRecord, error: nil)
        session.setActive(true, error: nil)
            self.recorder ()
        } else{
            println("not granted")
        }
     })
}
...