REST Resource: projects.locations.brands.evaluationMatchers

Resource: EvaluationMatcher

Pencocok evaluasi.

Representasi JSON
{
  "name": string,
  "displayName": string,
  "description": string,

  // Union field matcher can be only one of the following:
  "orderResultMatcher": {
    object (OrderResultMatcher)
  },
  "agentUtteranceStringMatcher": {
    object (AgentUtteranceStringMatcher)
  },
  "llmJudgementMatcher": {
    object (LLMJudgementMatcher)
  }
  // End of list of possible types for union field matcher.
}
Kolom
name

string

ID. Nama resource pencocok evaluasi.

displayName

string

Wajib. Nama pencocok evaluasi yang dapat dibaca manusia.

description

string

Opsional. Deskripsi pencocok evaluasi.

Kolom union matcher. Matcher yang akan digunakan untuk matcher evaluasi. Matcher harus menghasilkan hasil boolean yang menunjukkan apakah matcher evaluasi lulus atau tidak. matcher hanya ada berupa salah satu diantara berikut:
orderResultMatcher

object (OrderResultMatcher)

Opsional. Pencocok evaluasi untuk hasil pesanan.

agentUtteranceStringMatcher

object (AgentUtteranceStringMatcher)

Opsional. Matcher evaluasi untuk string ucapan agen.

llmJudgementMatcher

object (LLMJudgementMatcher)

Opsional. Pencocok evaluasi yang menggunakan penilaian LLM.

OrderResultMatcher

Pencocok evaluasi untuk hasil pesanan.

Representasi JSON
{
  "expectedOrder": {
    object (Order)
  },
  "expectedLegacyOrder": {
    object
  }
}
Kolom
expectedOrder

object (Order)

Wajib. Urutan yang diharapkan untuk dicocokkan. Urutan sebenarnya harus cocok dengan urutan yang diharapkan ini setelah normalisasi. Evaluasi akan lulus jika semua kolom dan jumlahnya cocok. Jumlah default 1 diabaikan selama perbandingan untuk menangani penghilangan kolom secara konsisten.

expectedLegacyOrder

object (Struct format)

Opsional. Status pesanan lama yang diharapkan untuk dicocokkan. Digunakan saat konteks evaluasi memiliki useLegacyOrderState yang ditetapkan ke true.

AgentUtteranceStringMatcher

Matcher evaluasi untuk string ucapan agen.

Representasi JSON
{
  "invert": boolean,

  // Union field match_pattern can be only one of the following:
  "contains": string,
  "regex": string
  // End of list of possible types for union field match_pattern.
}
Kolom
invert

boolean

Opsional. Jika benar, kondisi pencocokan akan dibalik (misalnya, "tidak berisi" atau "tidak cocok").

Kolom union match_pattern.

match_pattern hanya dapat berupa salah satu dari hal berikut:

contains

string

Opsional. Respons agen harus berisi substring ini.

regex

string

Opsional. Ucapan agen harus cocok dengan ekspresi reguler ini.

LLMJudgementMatcher

Matcher evaluasi yang menggunakan penilaian LLM dengan perintah berikut: "Anda adalah asisten yang sigap membantu pengguna memesan makanan di restoran. Anda akan diberikan input pengguna dan respons agen. Tugas Anda adalah menentukan apakah respons agen memenuhi kriteria berikut: {criteria}"

Representasi JSON
{
  "criteria": string,
  "invert": boolean
}
Kolom
criteria

string

Wajib. Kriteria yang harus dipertimbangkan LLM untuk menentukan apakah respons agen lulus pemeriksaan.

invert

boolean

Opsional. Jika benar, kondisi pencocokan akan dibalik (misalnya, "tidak berisi").

Metode

create

Membuat EvaluationMatcher.

delete

Menghapus EvaluationMatcher yang ditentukan.

get

Mendapatkan EvaluationMatcher.

list

Mencantumkan EvaluationMatchers.

patch

Memperbarui EvaluationMatcher yang ditentukan.