Siri Kit (преобразование речи в текст) отключает мой TTS (преобразование текста) iOS

Я пытаюсь запустить преобразование текста в речь (AVSpeechSynthesizer) вместе с преобразованием речи в текст из Siri Kit, но у меня ничего не получается.

Мой TTS работает отлично, пока я не запустил код для выполнения STT, после этого мой TTS больше не работает. Я отладил код, и во время выполнения кода ошибок не возникает, но мой текст не трансформируется в речь. Я думаю, что каким-то образом мой STT отключает выходной микрофон, и поэтому TTS больше не преобразует текст в речь, ну это только теория. Ops: Мой TTS перестает работать, но мой STT работает отлично

Какие-нибудь советы?

Вот мой код viewController:

@IBOutlet weak var microphoneButton: UIButton!

//text to speech
let speechSynthesizer = AVSpeechSynthesizer()

//speech to text
private var speechRecognizer: SFSpeechRecognizer!

private var recognitionRequest: SFSpeechAudioBufferRecognitionRequest?
private var recognitionTask: SFSpeechRecognitionTask?
private var audioEngine = AVAudioEngine()

@IBAction func textToSpeech(_ sender: Any) {

    if let word = wordTextField.text{

        if !speechSynthesizer.isSpeaking {


            //get current dictionary
            let dictionary = fetchSelectedDictionary()

            //get current language
            let language = languagesWithCodes[(dictionary?.language)!]

            let speechUtterance = AVSpeechUtterance(string: word)
                speechUtterance.voice = AVSpeechSynthesisVoice(language: language)
                speechUtterance.rate = 0.4
             //speechUtterance.pitchMultiplier = pitch
             //speechUtterance.volume = volume
                speechSynthesizer.speak(speechUtterance)

        }
        else{
            speechSynthesizer.continueSpeaking()
        }

    }
}

@IBAction func speechToText(_ sender: Any) {

    if audioEngine.isRunning {
        audioEngine.stop()
        recognitionRequest?.endAudio()
        microphoneButton.isEnabled = false
        microphoneButton.setTitle("Start Recording", for: .normal)
    } else {
        startRecording()
        microphoneButton.setTitle("Stop Recording", for: .normal)
    }

}

func startRecording() {

    if recognitionTask != nil {
        recognitionTask?.cancel()
        recognitionTask = nil
    }

    let audioSession = AVAudioSession.sharedInstance()
    do {
        try audioSession.setCategory(AVAudioSessionCategoryRecord)
        try audioSession.setMode(AVAudioSessionModeMeasurement)
        try audioSession.setActive(true, with: .notifyOthersOnDeactivation)
    } catch {
        print("audioSession properties weren't set because of an error.")
    }

    recognitionRequest = SFSpeechAudioBufferRecognitionRequest()

    guard let inputNode = audioEngine.inputNode else {
        fatalError("Audio engine has no input node")
    }

    guard let recognitionRequest = recognitionRequest else {
        fatalError("Unable to create an SFSpeechAudioBufferRecognitionRequest object")
    }

    recognitionRequest.shouldReportPartialResults = true

    recognitionTask = speechRecognizer?.recognitionTask(with: recognitionRequest, resultHandler: { (result, error) in

        var isFinal = false

        if result != nil {

            self.wordTextField.text = result?.bestTranscription.formattedString
            isFinal = (result?.isFinal)!
        }

        if error != nil || isFinal {
            self.audioEngine.stop()
            inputNode.removeTap(onBus: 0)

            self.recognitionRequest = nil
            self.recognitionTask = nil

            self.microphoneButton.isEnabled = true
        }
    })

    let recordingFormat = inputNode.outputFormat(forBus: 0)
    inputNode.installTap(onBus: 0, bufferSize: 1024, format: recordingFormat) { (buffer, when) in
        self.recognitionRequest?.append(buffer)
    }

    audioEngine.prepare()

    do {
        try audioEngine.start()
    } catch {
        print("audioEngine couldn't start because of an error.")
    }

    wordTextField.text = "Say something, I'm listening!"
}

}


person Rafael Paz    schedule 13.03.2017    source источник


Ответы (2)


Эта строка:

try audioSession.setMode(AVAudioSessionModeMeasurement)

наверное причина. Это может привести к тому, что громкость будет настолько низкой, что будет казаться, что она выключена. Пытаться:

try audioSession.setMode(AVAudioSessionModeDefault)

и посмотрите, работает ли он.

person coco    schedule 03.02.2018
comment
Извините, что ответил на это спустя долгое время, но, поскольку я не был на StackOverflow, я не видел вашего комментария, однако сегодня я попробовал это решение, и ЭТО РАБОТАЛО!!!! Большое спасибо, приятель! Ты спас мою задницу, ха-ха! Я принял это как ответ! Спасибо! - person Rafael Paz; 12.03.2018

Вероятно, потому что ваша аудиосессия находится в режиме записи. У вас есть 2 решения: во-первых, установить для вашей попытки audioSession.setCategory(AVAudioSessionCategoryRecord) значение AVAudioSessionCategoryPlayAndRecord (это будет работать), но более чистым способом было бы получить отдельную функцию для того, чтобы сказать что-то, а затем установите для AVAudioSessionCategory значение AVAudioSessionCategoryPlayback

Надеюсь, это помогло.

person Yann Massard    schedule 13.03.2017
comment
Брат, ты только что спас мне жизнь! Большое спасибо, сработало как шарм! - person Rafael Paz; 14.03.2017
comment
Брат, просто что-то еще .. Вы знаете, как я могу заставить мой динамик моего iPhone вернуться к нормальной громкости? Я имею в виду, что до того, как я запустил преобразование речи в текст, громкость моего iPhone была высокой, но после того, как я запустил код и устранил проблему, как вы мне показали, громкость моего преобразования текста в речь стала очень низкой. Большое спасибо, что выручили меня :) - person Rafael Paz; 14.03.2017
comment
да, попробуй это сделать {попробуй AVAudioSession.sharedInstance().overrideOutputAudioPort(AVAudioSessionPortOverride.speaker)} catch _ {} - person Yann Massard; 15.03.2017
comment
У меня это не сработало, брат, но ничего, я поищу больше информации об этом. В любом случае, большое спасибо за вашу помощь! Я действительно ценю это - person Rafael Paz; 16.03.2017