Transmisión extendida

Puedes usar la transmisión extendida para transmitir contenido de audio a Dialogflow y transmitir sugerencias de agentes humanos. Debes configurar un modelo de Speech-to-Text que admita una sola expresión.

Por lo general, cierras a la mitad o le indicas a la API de Dialogflow cuándo finalizar la transmisión para generar la transcripción final y las sugerencias de Agent Assist. Esto sucede en los turnos de conversación, en los que la API recibe el parámetro is_final=true del resultado del reconocimiento, StreamingAnalyzeContentResponse.recognition_result.

La transmisión extendida reduce la necesidad de cerrar a la mitad en los turnos de conversación. Extiende el tiempo de espera de conexión a tres minutos, durante los cuales puedes enviar transmisiones de audio sin cerrar a la mitad. La API de Dialogflow envía automáticamente las transcripciones finales y las sugerencias de Agent Assist a la transmisión. Solo reinicias la transmisión si se agota el tiempo de espera.

Conceptos básicos de transmisión

La transmisión extendida de Agent Assist es similar a la transmisión de audio para la transcripción de voz. Tu sistema transmite datos de audio a la API, y Dialogflow transmite datos de StreamingAnalyzeContentResponse. Los datos que se muestran incluyen sugerencias para tus agentes humanos.

Para usar la transmisión extendida, llama al streamingAnalyzeContent método.

La transmisión extendida solo admite la etapa de Agent Assist. Consulta la etapa de conversación stage. Sigue estos pasos para usar la transmisión extendida:

  1. Llama al método streamingAnalyzeContent y configura los siguientes campos:
    • StreamingAnalyzeContentRequest.audio_config.audio_encoding: AUDIO_ENCODING_LINEAR_16 o AUDIO_ENCODING_MULAW
    • enable_extended_streaming: true.
  2. La primera solicitud streamingAnalyzeContent prepara la transmisión y establece tu configuración de audio.
  3. En las solicitudes posteriores, envías bytes de audio a la transmisión.
  4. Mientras sigas enviando audio, seguirás recibiendo sugerencias. No es necesario que cierres la transmisión de forma manual. Se cerrará automáticamente una vez que Agent Assist detecte que se detuvieron las expresiones.
  5. Reinicia la transmisión (que incluye volver a enviar la configuración de audio inicial) en los siguientes casos:
    • La transmisión está interrumpida (se detuvo cuando no debía hacerlo).
    • Tus datos de audio se acercan al tiempo de espera automático de 3 minutos.
    • Recibiste un error que se puede reintentar. Puedes reintentar hasta tres veces.