REST Resource: projects.locations.brands.evaluationCaseResults

Ressource: EvaluationCaseResult

Ein Ergebnis eines Bewertungsfalls.

JSON-Darstellung
{
  "name": string,
  "evaluationCase": {
    object (EvaluationCase)
  },
  "evaluationContext": {
    object (EvaluationContext)
  },
  "evaluationDataset": string,
  "sessionRecord": string,
  "status": enum (Status),
  "matcherResults": [
    {
      object (MatcherResult)
    }
  ],
  "createTime": string
}
Felder
name

string

ID. Der Ressourcenname des Ergebnisses des Bewertungsfalls. Format: projects/{project}/locations/{location}/brands/{brand}/evaluationCaseResults/{evaluationCaseResult}

evaluationCase

object (EvaluationCase)

Nur Ausgabe. Der Bewertungsfall, mit dem dieses Ergebnis verknüpft ist.

evaluationContext

object (EvaluationContext)

Nur Ausgabe. Der Bewertungskontext, mit dem dieses Ergebnis verknüpft ist.

evaluationDataset

string

Nur Ausgabe. Die Referenz des Bewertungs-Datasets, mit dem dieses Ergebnis verknüpft ist. Wenn nicht festgelegt, wird der Testlauf als eigenständiger Test und nicht als Teil eines Bewertungs-Datasets ausgeführt. Format: projects/{project}/locations/{location}/brands/{brand}/evaluationDatasets/{evaluationDataset}

sessionRecord

string

Nur Ausgabe. Der Ressourcenname des Sitzungseintrags, mit dem dieses Ergebnis verknüpft ist. Format: projects/{project}/locations/{location}/brands/{brand}/sessionRecords/{sessionRecord}

status

enum (Status)

Nur Ausgabe. Der Status des Bewertungsfalls.

matcherResults[]

object (MatcherResult)

Nur Ausgabe. Die Liste der Ergebnisse des Bewertungsabgleichs für den Bewertungsfall. Die Ergebnisse der Bewertungsmatcher.

createTime

string (Timestamp format)

Nur Ausgabe. Der Erstellungszeitpunkt des Ergebnisses des Bewertungsfalls.

Verwendet RFC 3339, wobei die generierte Ausgabe immer Z-normalisiert ist und 0, 3, 6 oder 9 Nachkommastellen verwendet. Andere Offsets als „Z“ werden ebenfalls akzeptiert. Beispiele: "2014-10-02T15:01:23Z", "2014-10-02T15:01:23.045123456Z" oder "2014-10-02T15:01:23+05:30".

Status

Der Status des Bewertungsfalls.

Enums
STATUS_UNSPECIFIED Ungültiger Status.
PASS Alle Bewertungsmatcher sind erfüllt.
FAIL Mindestens einer der Bewertungsmatcher ist nicht erfüllt.
ERROR Es ist ein Fehler aufgetreten, weil die BidiProcessOrder-Sitzung unerwartet beendet wurde und die Bewertung nicht abgeschlossen werden konnte.

MatcherResult

Ein Ergebnis eines Bewertungsabgleichs.

JSON-Darstellung
{
  "evaluationMatcher": {
    object (EvaluationMatcher)
  },

  // Union field result can be only one of the following:
  "orderResultMatcherResult": {
    object (OrderResultMatcherResult)
  },
  "agentUtteranceStringMatcherResult": {
    object (AgentUtteranceStringMatcherResult)
  },
  "llmJudgementMatcherResult": {
    object (LLMJudgementMatcherResult)
  }
  // End of list of possible types for union field result.
}
Felder
evaluationMatcher

object (EvaluationMatcher)

Nur Ausgabe. Der Bewertungs-Matcher, mit dem dieses Ergebnis verknüpft ist.

Union-Feld result. Das Ergebnis des Bewertungsabgleichs. Für result ist nur einer der folgenden Werte zulässig:
orderResultMatcherResult

object (OrderResultMatcherResult)

Nur Ausgabe. Das Ergebnis eines Abgleichs von Bestellungen.

agentUtteranceStringMatcherResult

object (AgentUtteranceStringMatcherResult)

Nur Ausgabe. Das Ergebnis eines String-Matchers für Agentenäußerungen.

llmJudgementMatcherResult

object (LLMJudgementMatcherResult)

Nur Ausgabe. Das Ergebnis eines LLM-Urteilsabgleichs für eine Agentenäußerung.

OrderResultMatcherResult

Das Ergebnis eines Abgleichs von Bestellungen.

JSON-Darstellung
{
  "match": boolean,
  "difference": string
}
Felder
match

boolean

Nur Ausgabe. Gibt an, ob der Abgleich des Bestell-Ergebnisses erfolgreich war oder nicht.

difference

string

Nur Ausgabe. Die formatierte Differenz zwischen der erwarteten und der tatsächlichen Reihenfolge im Abgleich für die Reihenfolge der Ergebnisse im Format (-want +got).

AgentUtteranceStringMatcherResult

Das Ergebnis eines String-Matchers für Agentenäußerungen.

JSON-Darstellung
{
  "match": boolean
}
Felder
match

boolean

Nur Ausgabe. Gibt an, ob der String-Matcher für die Äußerung des KI-Agenten erfolgreich war oder nicht.

LLMJudgementMatcherResult

Das Ergebnis eines LLM-Bewertungsabgleichs für eine Agentenäußerung.

JSON-Darstellung
{
  "match": boolean,
  "reasoning": string
}
Felder
match

boolean

Nur Ausgabe. Gibt an, ob der LLM-Beurteilungsabgleich für die Äußerung des KI-Agenten erfolgreich war oder nicht.

reasoning

string

Nur Ausgabe. Beschreibt die Begründung, warum die LLM-Bewertung übereinstimmte oder nicht.

Methoden

delete

Löscht das angegebene EvaluationCaseResult.

get

Ruft ein EvaluationCaseResult ab.

list

Listet EvaluationCaseResults auf.