REST Resource: projects.locations.brands.evaluationMatchers

Ressource : EvaluationMatcher

Un outil de mise en correspondance d'évaluation.

Représentation JSON
{
  "name": string,
  "displayName": string,
  "description": string,

  // Union field matcher can be only one of the following:
  "orderResultMatcher": {
    object (OrderResultMatcher)
  },
  "agentUtteranceStringMatcher": {
    object (AgentUtteranceStringMatcher)
  },
  "llmJudgementMatcher": {
    object (LLMJudgementMatcher)
  }
  // End of list of possible types for union field matcher.
}
Champs
name

string

Identifiant. Nom de ressource de l'outil de mise en correspondance d'évaluation.

displayName

string

Obligatoire. Nom lisible par l'humain de l'outil de mise en correspondance d'évaluation.

description

string

Facultatif. Description de l'outil de mise en correspondance d'évaluation.

Champ d'union matcher. Outil de mise en correspondance à utiliser pour l'outil de mise en correspondance d'évaluation. Le matcher doit produire un résultat booléen indiquant si le matcher d'évaluation a réussi ou non. matcher ne peut être qu'un des éléments suivants :
orderResultMatcher

object (OrderResultMatcher)

Facultatif. Outil de mise en correspondance d'évaluation pour un résultat de commande.

agentUtteranceStringMatcher

object (AgentUtteranceStringMatcher)

Facultatif. Outil de mise en correspondance d'évaluation pour une chaîne d'énoncé d'agent.

llmJudgementMatcher

object (LLMJudgementMatcher)

Facultatif. Outil de mise en correspondance d'évaluation utilisant le jugement LLM.

OrderResultMatcher

Outil de mise en correspondance d'évaluation pour un résultat de commande.

Représentation JSON
{
  "expectedOrder": {
    object (Order)
  },
  "expectedLegacyOrder": {
    object
  }
}
Champs
expectedOrder

object (Order)

Obligatoire. Ordre attendu pour la correspondance. L'ordre réel doit correspondre à l'ordre attendu après la normalisation. L'évaluation est réussie si tous les champs et toutes les quantités correspondent. Les quantités par défaut de 1 sont ignorées lors de la comparaison afin de gérer l'omission de champ de manière cohérente.

expectedLegacyOrder

object (Struct format)

Facultatif. État de l'ancienne commande attendu à mettre en correspondance. Utilisé lorsque le contexte d'évaluation a défini useLegacyOrderState sur "true".

AgentUtteranceStringMatcher

Outil de mise en correspondance d'évaluation pour une chaîne d'énoncé d'agent.

Représentation JSON
{
  "invert": boolean,

  // Union field match_pattern can be only one of the following:
  "contains": string,
  "regex": string
  // End of list of possible types for union field match_pattern.
}
Champs
invert

boolean

Facultatif. Si la valeur est "true", la condition de correspondance est inversée (par exemple, "ne contient pas" ou "ne correspond pas").

Champ d'union match_pattern.

match_pattern ne peut être qu'un des éléments suivants :

contains

string

Facultatif. L'énoncé de l'agent doit contenir cette sous-chaîne.

regex

string

Facultatif. L'énoncé de l'agent doit correspondre à cette expression régulière.

LLMJudgementMatcher

Un outil de mise en correspondance d'évaluation utilisant le jugement d'un LLM avec le prompt suivant : "Tu es un assistant serviable qui aide les utilisateurs à commander des repas dans un restaurant. Vous recevrez des entrées utilisateur et des réponses de l'agent. Your task is to determine if the agent response satisfies the following criteria: {criteria}"

Représentation JSON
{
  "criteria": string,
  "invert": boolean
}
Champs
criteria

string

Obligatoire. Critères que le LLM doit prendre en compte pour déterminer si une réponse d'agent réussit la vérification.

invert

boolean

Facultatif. Si la valeur est "true", la condition de correspondance est inversée (par exemple, "ne contient pas").

Méthodes

create

Crée un EvaluationMatcher.

delete

Supprime l'EvaluationMatcher spécifié.

get

Récupère un EvaluationMatcher.

list

Répertorie les EvaluationMatchers.

patch

Met à jour l'EvaluationMatcher spécifié.