A funcionalidade de comparação permite-lhe ver como uma instrução, um modelo ou uma definição de parâmetro diferente altera o resultado do modelo. Pode ver cada uma das instruções e as respetivas respostas lado a lado para comparar e analisar das seguintes formas:
- Com um novo comando.
- Com outro comando guardado.
- Com um facto observável.
Antes de começar
Para aceder à funcionalidade de comparação, siga estes passos:
Na Google Cloud consola, aceda à página Criar comando.
Selecione Comparar. É apresentada a página Comparar.
Crie um comando na funcionalidade de comparação
Na página Comparar, pode criar um comando antes de selecionar outro comando para comparar os resultados.
Para criar um comando, siga estes passos:
No campo Novo comando, introduza o seu comando.
Clique em Enviar comandos. A resposta do modelo aparece abaixo do texto do comando que introduziu.
Clique em Guardar como novo. É apresentada uma caixa de diálogo com a mensagem Guardar.
Introduza o nome do novo comando no campo Nome do comando.
Selecione a sua região no campo Região ou deixe-a como a região predefinida.
Se for aplicada uma chave de encriptação gerida pelo cliente (CMEK), faça o seguinte:
- Selecione a caixa de verificação Chave de encriptação gerida pelo cliente (CMEK).
- Selecione uma chave no campo Selecionar uma chave do Cloud KMS.
Clique em Guardar, o que guarda o comando na lista de comandos a usar na página Compare o comando guardado.
Clique em Enviar comandos para comparar os comandos e as respetivas respostas.
Pode atualizar os comandos e guardar as versões atualizadas como novos comandos.
Compare com um novo comando
Para comparar o comando guardado com um novo comando, siga estes passos:
- Clique em Comparar novo comando. É apresentado um painel Comparar.
- Opcional: clique em Mudar modelo para usar um modelo diferente do modelo predefinido.
- Opcional: expanda Resultados.
- Opcional: se quiser que o modelo produza num formato específico, como JSON, clique no botão Saída estruturada. Depois de selecionar Saída estruturada, as opções de fundamentação são desativadas, porque a fundamentação não é suportada com a saída estruturada.
- Opcional: altere o Orçamento de reflexão para uma das seguintes opções:
- Automático: o modelo só pensa quando precisa. O modelo ajusta a forma como pensa ou analisa uma situação com base no que é necessário no momento.
- Manual: pode ajustar os tokens do orçamento de reflexão.
- Desativado: não são usados raciocínios nem orçamentos.
Resultados:
- Opcional: expanda Ferramentas.
- Selecione uma das seguintes opções:
- Fundamentação: Google: fundamentação com a Pesquisa Google ou o Google Maps.
- Fundamentação: os seus dados: fundamentação com o Vertex AI RAG Engine, o Vertex AI Search ou o Elasticsearch.
- Se selecionar Fundamentação: os seus dados, selecione a origem de dados que quer usar.
Ferramentas:
- Opcional: expanda Avançadas:
- Selecione Região.
- Selecione Definições do filtro de segurança. É apresentada uma caixa de diálogo. Mantenha a predefinição Desativado ou pode especificar Bloquear poucos, Bloquear alguns ou Bloquear a maioria para cada uma das seguintes opções:
- Incitamento ao ódio: comentários negativos ou prejudiciais que visam a identidade ou atributos protegidos.
- Conteúdo perigoso: promove ou permite o acesso a bens, serviços e atividades prejudiciais.
- Conteúdo sexualmente explícito: contém referências a atos sexuais ou outro conteúdo lascivo.
- Conteúdo de assédio: comentários maliciosos, intimidatórios, de bullying ou abusivos dirigidos a outro indivíduo.
- Clique em Guardar para guardar as definições e fechar a caixa de diálogo.
- Selecione a temperatura no campo Temperatura. A temperatura controla a aleatoriedade na seleção de tokens. Uma temperatura mais baixa é adequada quando espera uma resposta verdadeira ou correta. Uma temperatura mais elevada pode gerar resultados diversos ou inesperados.
- Selecione o limite de tokens de saída no campo Limite de tokens de saída. O limite de tokens de saída determina a quantidade máxima de texto de saída de um comando. Um token tem aproximadamente quatro carateres.
- Selecione o número máximo de respostas no campo Máximo de respostas. Se o número máximo de respostas do modelo geradas por comando. Devido a filtros de segurança ou outras políticas, as respostas podem continuar a ser bloqueadas.
- Selecione um valor no campo Top-P. O Top-p altera a forma como o modelo seleciona tokens para a saída.
- Clique no botão para ativar/desativar no campo Fazer stream das respostas do modelo. Se selecionada, as respostas são impressas à medida que são geradas.
- Introduza uma sequência de paragens no campo Adicionar sequência de paragens. Prima Enter após cada sequência.
Avançadas:
- Clique em Guardar para guardar as alterações às suas definições.
- Clique em Aplicar.
- Clique em Enviar comandos para comparar os comandos e as respetivas respostas.
Para mais informações sobre os limites de tokens para cada modelo, consulte o artigo Controle o orçamento de reflexão.
Compare com outro comando guardado
Para comparar o seu comando guardado com outro comando guardado, siga estes passos:
- Clique em Comparar comando guardado. É apresentado o painel Comando existente.
Escolha até dois comandos existentes para comparar.
- Selecione um Nome do comando. Se tiver muitos comandos na sua lista, clique no campo Filtro e selecione a propriedade pela qual quer filtrar. Introduza um valor e prima Enter.
- Clique em Aplicar. A página Comparar apresenta o comando que selecionou juntamente com outros comandos que criou ou selecionou para comparação.
Clique em Enviar comandos para comparar os comandos e as respetivas respostas.
Compare com um facto observável
O facto observável é a sua resposta preferencial ao comando. Todas as outras respostas do modelo são avaliadas em função da resposta verdadeira.
Para comparar o seu comando guardado com uma verdade fundamental, siga estes passos:
- Clique em Dados de referência. É apresentado o painel Facto observável.
- Introduza os dados reais para gerar métricas de avaliação adicionais.
- Clique em Guardar para guardar os dados de referência.
- Clique em Enviar comandos para comparar os comandos e as respetivas respostas.
As métricas de avaliação geradas quando compara um comando com uma verdade fundamental não são afetadas pela região que selecionar.
O que se segue?
- Explore mais exemplos de comandos na galeria de comandos.
- Para mais informações sobre a avaliação dos seus modelos, consulte a vista geral do serviço de avaliação de IA gen.