Live A2A 翻譯功能使用者指南

即時語音對語音 (A2A) 翻譯功能可讓服務專員以自己的語言與顧客順暢溝通。如要為客服設定啟用即時 A2A 翻譯功能,請在 Agent Assist 控制台中按照下列步驟操作。

步驟 1:建立產生器

  1. 前往「即時翻譯」,然後按一下「建立」
  2. 輸入代理和客戶的生成器名稱和目標語言。
  3. 前往「對話管道」,然後選擇語音。
  4. 啟用「會議模式」
  5. 按一下 [儲存]
  1. 請按照這些操作說明建立對話設定檔,並附加 Google Telephony Platform (GTP) 號碼。系統會建立含有虛擬代理的對話設定檔。
  2. 前往「選擇使用 Dialogflow」,然後停用「虛擬代理」
  3. 依序前往「語音設定」 >「SIP 設定」,然後停用「允許虛擬代理互動」

步驟 3:設定對話設定檔

請按照下列步驟,設定在步驟 2 中建立的對話設定檔。

  1. 依序前往「對話設定檔」>「建議類型」
  2. 選取「即時翻譯」,然後輸入您在步驟 1 建立的生成器名稱。
  3. 啟用「進階建議設定」,即可使用未經過編輯的對話資料取得建議。
  4. 啟用「電話」設定,即可使用雙向串流 API
  5. 在「取樣率赫茲」欄位中輸入「16000」
  6. 按一下 [儲存]

步驟 4:初始化會議模式

會議模式服務會透過下列工作流程,處理多方通話中的混合音訊串流:

  1. 將專屬 GTP 電話號碼新增為第三位參與者,即可在進行中的通話中整合即時語音翻譯功能。使用常見電話和聯絡中心平台提供的標準三方通話功能。
  2. 連線後,GTP 會立即收到單一混合音訊串流,並透過 bidiStreamingAnalyzeContent 要求處理。
  3. Gemini 模型會根據輸入的音訊合成翻譯音訊,並轉錄原始音訊。系統會翻譯歸因音訊,並在三方會議中向所有參與者播放翻譯音訊。