Nutzerhandbuch für die sequenzielle Audioübersetzung

Mit der sequenziellen Audioübersetzung können Kundenservicemitarbeiter nahtlos mit Kunden in deren eigener Sprache kommunizieren. So aktivieren Sie die Funktion für Ihre Kundenservicelösung:

Hinweis

Bevor Sie mit der Einrichtung beginnen, müssen Sie Zugriff auf Folgendes haben:

  • Google Cloud -Konsole mit den entsprechenden Berechtigungen.
  • Google Cloud SDK (gcloud) installiert und konfiguriert.
  • jq für die JSON-Verarbeitung installiert.
  • Zulassungsliste für Übersetzungsfunktionen in Ihrem Projekt.

Schritt 1: Unterhaltungsprofil und Telefonnummer erstellen

Gehen Sie so vor, um eine Telefonnummer an ein Konversationsprofil anzuhängen, ohne API-Aufrufe zu verwenden.

  1. Rufen Sie die Konsole für Konversations-Agents (Dialogflow CX) auf.
  2. Wählen Sie Ihr Projekt aus, das auf der Zulassungsliste steht: YOUR_PROJECT_ID.
  3. Klicken Sie auf Agent erstellen > Selbst konfigurieren.
  4. Wählen Sie die Region Global (Globale Bereitstellung, ruhende Daten in den USA) aus.
  5. Wählen Sie Ablauf anstelle von Playbook aus und klicken Sie dann auf Erstellen.
  6. Wählen Sie im Bereich Integration aus.
  7. Klicken Sie auf Verwalten > Erstellen, um eine neue Telefonnummer zu erhalten.
  8. Geben Sie in den Einstellungen für das Konversationsprofil den Anzeigenamen ein. Notieren Sie sich diesen Namen für die spätere Verwendung.
  9. Speichern Sie die Telefonnummer.

Schritt 2: Generator erstellen

  1. Rufen Sie die Agent Assist-Konsole auf.
  2. Wählen Sie dasselbe Projekt aus: YOUR_PROJECT_ID.
  3. Gehen Sie zu Live-Übersetzung.
  4. Klicken Sie auf Erstellen und geben Sie einen Namen für den Generator ein.
  5. Wählen Sie die beiden Sprachen aus.
  6. Wählen Sie im Übersetzungskanal Sprache aus.
  7. Wählen Sie für Konferenzmodus die Option Wahr aus.
  8. Klicken Sie auf Speichern.

Schritt 3: Konversationsprofil konfigurieren

Folgen Sie dieser Anleitung, um ein Konversationsprofil mit einer verknüpften Google Telephony Platform-Nummer (GTP) zu erstellen. Dadurch wird ein Konversationsprofil mit einem virtuellen Agenten erstellt.

Mit den folgenden Schritten können Sie das in Schritt 1 erstellte Konversationsprofil konfigurieren.

  1. Rufen Sie Konversationsprofile > Vorschlagstypen auf.
  2. Wählen Sie Live-Übersetzung und den Generator aus, den Sie in Schritt 2 erstellt haben.
  3. Aktivieren Sie die erweiterten Vorschlagseinstellungen, um nicht bearbeitete Unterhaltungsdaten für Vorschläge zu verwenden.
  4. Aktivieren Sie die Telefonieeinstellungen, um die bidirektionale Streaming API zu verwenden.
  5. Deaktivieren Sie den virtuellen Agenten unter Dialogflow verwenden, es sei denn, Sie möchten eine benutzerdefinierte Ansage für das Dolmetschen konfigurieren (wie in optionalem Schritt 5 beschrieben). Wenn Sie eine Ansage wünschen, lassen Sie den virtuellen Agenten aktiviert.
  6. Legen Sie unter Sprachkonfiguration > Speech-to-Text-Konfiguration Folgendes fest:
  7. Audiocodierung: Linear 16
  8. Abtastrate in Hertz: 16000
  9. Klicken Sie auf Speichern.

Schritt 4: Übersetzung prüfen

Rufen Sie die Telefonnummer an, die Sie in Schritt 1 erstellt haben, um zu prüfen, ob die Übersetzung wie erwartet funktioniert.

Optionaler Schritt 5: Ansage für die Sprachübersetzung konfigurieren

Im Konferenzmodus werden Audiostreams standardmäßig direkt übersetzt, ohne dass eine Begrüßung abgespielt wird. Wenn Sie den virtuellen Agenten in Schritt 3 aktiviert gelassen haben, führen Sie die folgenden Schritte aus, um eine Begrüßungsansage zu konfigurieren, die vor der Phase der Live-Audioübersetzung abgespielt wird.

  1. Öffnen Sie die Conversational Agents (Dialogflow CX) Console und wählen Sie Ihren Agenten aus.
  2. Wählen Sie auf dem Tab Erstellen die Option Standardstart-Flow aus.
  3. Klicken Sie auf die Seite Start.
  4. Klicken Sie im Abschnitt „Routen“ auf die Route Default Welcome Intent.

Auftragsausführung aktualisieren

  1. Rufen Sie den Abschnitt Auftragsausführung dieser Route auf.
  2. Entfernen Sie im Abschnitt Dialog des KI-Agenten > Textantwort alle vorhandenen allgemeinen Begrüßungen (z. B. Hallo, wie kann ich Ihnen helfen?).
  3. Geben Sie Ihre benutzerdefinierte Ansage für die Sprachübersetzung ein (z. B. Dies ist ein KI-basierter Übersetzungsdienst).
  4. Klicken Sie im selben Bereich Auftragsausführung auf Dialogantwort hinzufügen und wählen Sie Übergabe an Live-Agenten aus.
  5. Geben Sie im Feld Metadaten/Nutzlast für die Übergabe an einen Live-Agenten ein leeres JSON-Objekt ein:{}
  6. Klicken Sie auf Speichern.

Ankündigung prüfen

Wenn Sie einen Testanruf tätigen, sollten Sie zuerst die Ansage hören. Die leere JSON-Nutzlast initiiert dann eine sofortige Übergabe, wodurch der Anruf an die AGENT_ASSIST_STAGE weitergeleitet wird, wo die Gemini-Live-Übersetzung beginnt.