Quality AI を使ってみる

このページでは、Quality AI を設定して使用を開始する手順について説明します。

前提条件

次の手順で、Quality AI にアクセスできることを確認します。

  1. プロジェクトで Customer Experience Insights を有効にし、Customer Experience Insights API にアクセスできることを確認します。
  2. Dialogflow ランタイムの統合を有効にします

Quality AI を使用する

  1. Google Cloud CCAI を開き、Customer Experience Insights が有効になっているプロジェクトを選択します。
  2. [分析情報] > [insert_chart] [Quality AI] をクリックします。

スコアカードを作成する

ビジネス ユニットごとに異なるスコアカードを作成できます。

  1. [article] [Scorecards] > [+ Add scorecard] をクリックします。
  2. [Untitled Scorecard edit] をクリックしてスコアカードの名前を追加します。次に、[Unspecified description edit] をクリックして、スコアカードの目的の説明を追加します。
  3. [+ 質問を追加] をクリックして、エージェントのパフォーマンスを評価する質問と、必要に応じてタグを追加します。質問ごとに、ビジネス、顧客、コンプライアンスのタグを選択できます。

    質問: エージェントは、会話全体を通して思慮深い質問をすることで、お客様のニーズを理解しましたか?

    タグ: 顧客

  4. 各回答の選択肢の解釈を定義する手順を追加します。

    手順:

    はい: エージェントは思慮深い質問をしました。または、エージェントは積極的な読解スキルを示しました。

    いいえ: エージェントは思慮深い質問をしませんでした。エージェントがお客様のニーズを理解していなかったため、お客様は何度も言い直す必要がありました。エージェントは、郵便番号や商品名など、必要な質問のみを行いました。

    該当なし: 質問を投稿できません。やり取りは転送を目的としたものか、販売以外のやり取りでした。

  5. [トレース] を有効にして、この機能を有効にします。

  6. 回答のタイプを選択し、回答の選択肢と対応するスコアを入力して、該当する場合は N/A を含めるチェックボックスをオンにします。

  7. [+ 回答の選択肢を追加] をクリックして、回答の選択肢とそのスコアを追加します。

    回答のタイプ: はい/いいえ

    回答の選択肢とスコア: はい 1、いいえ 0

    [check_box] 回答の選択肢として [N/A](利用不可)を追加します。選択した場合、この質問は総合成績の計算に含まれません。

  8. [保存] をクリックします。

  9. 質問ごとに手順 3 ~ 8 を繰り返して、[次へ] をクリックします。

ソースメニュー

デフォルトでは、Quality AI には、最近作成またはアクセスしたスコアカードに基づく情報が表示されます。スコアカードを作成または選択していない新しいユーザーに対して、デフォルトのオーバーライドを設定することもできます。これにより、Customer Experience Insights コンソールで Quality AI ページを初めてクリックしたときに、プロジェクトのデータが表示されます。

管理者は、プロジェクトのデフォルトのスコアカードを設定する際に、次の 2 つの方法を選択できます。

  1. 次のいずれかのオプションを選択します。
    • [article] [Scorecards] > [Change] をクリックします。
    • [設定] アイコン > [**スコアカード**] をクリックします。
  2. メニューから [デフォルトのスコアカード] を選択し、[保存] をクリックします。

AI モデルを調整する

モデルの調整には、会話、関連する質問、想定される回答で構成される会話例を使用します。会話例は CSV ファイルとしてアップロードする必要があります。会話例のフォーマットの詳細については、Quality AI のベスト プラクティスのページをご覧ください。

会話例を準備する

Quality AI には、特定のスコアカードの英数字の会話、スコアカード、質問 ID を自動的に生成するテンプレートが用意されています。含める会話をフィルタすることもできます。各質問の回答を追加する必要があります。

Quality AI コンソールで会話例のテンプレートを作成するには、次の操作を行います。

  1. [**会話**] に移動し、[フィルタ] を追加して特定の会話を選択します。
  2. [会話例テンプレートを作成] をクリックします。
  3. [スコアカード] をクリックし、スコアカードの名前を選択します。
  4. [Cloud Storage の宛先] をクリックし、Cloud Storage バケット内のファイルの場所を入力します。

会話例をアップロードする

会話例を含む CSV ファイルがある場合は、モデルの調整を容易にするためにアップロードする必要があります。

  1. Quality AI が有効になっているプロジェクト内で、会話例を Cloud Storage バケットにアップロードします。

    コンソールで Google Cloud Storage を使用する方法の詳細な手順については、Cloud Storage のドキュメントをご覧ください。 Google Cloud

  2. Quality AI コンソールで、[スコアカード] に移動してスコアカードを選択し、[次へ] をクリックして会話例を選択します。

  3. [+ 会話例を追加] をクリックして Cloud Storage バケットのパスを入力し、[追加] をクリックします。

  4. [調整を開始] をクリックしてモデルの調整を開始します。これには 4 ~ 8 時間かかることがあります(質問や会話例が多いスコアカードの場合は時間が長くなります)。

  5. 調整が完了したら、[新しいバージョンをリリース] をクリックします。

会話例を編集する

会話例は、FeedbackLabel リソースを使用して編集できます。この API は、既存の会話例の作成、更新、削除をサポートしています。bulkUploadFeedbackLabels メソッドを使用して、会話例を一括アップロードすることもできます。会話例は、同じ ID と更新された回答ラベルを含む CSV ファイルをアップロードすることで、いつでも更新できます。

スコアカードを編集してモデルを再調整する

既存のスコアカードを編集して、会話例に関連付けられた質問を変更することもできます。スコアカードを編集するには、変更を反映するためにモデルを再調整する必要があります。

  1. Quality AI コンソールで、[スコアカード] に移動してスコアカードを選択し、[編集] をクリックします。
  2. 質問を追加するか変更するかに応じて、次のいずれかを選択します。
    • [+ 質問を追加] をクリックします。
    • 質問の [編集] をクリックします。
  3. フォームに入力します。
  4. モデルの再調整を開始するには、[保存] > [次へ] > [調整を開始] をクリックします。
  5. 少なくとも 4 ~ 8 時間待ちます。
  6. 調整が完了したら、[新しいバージョンをリリース] をクリックします。

次のステップ