O recurso "Comparar" permite conferir como um comando, modelo ou configuração de parâmetro diferente muda a saída do modelo. É possível visualizar cada um dos comandos e as respostas lado a lado para comparar e analisar das seguintes maneiras:
- Com um novo comando.
- Com outro comando salvo.
- Com informações empíricas.
Antes de começar
Para acessar o recurso "Comparar", siga estas etapas:
No Cloud de Confiance console do, acesse a página Criar comando.
Selecione Comparar. A página Comparar será exibida.
Criar um comando no recurso "Comparar"
Na página Comparar, é possível criar um comando antes de selecionar outro para comparar os resultados.
Para criar um comando, siga estas etapas:
No campo Novo comando, digite o comando.
Clique em Enviar comandos. A resposta do modelo aparece abaixo do texto do comando inserido.
Clique em Salvar como novo. Uma caixa de diálogo Salvar comando será exibida.
Insira o nome do novo comando no campo Nome do comando.
Selecione sua região no campo Região ou deixe a região padrão.
Se uma chave de criptografia gerenciada pelo cliente (CMEK) for aplicável, faça o seguinte:
- Marque a caixa de seleção Chave de criptografia gerenciada pelo cliente (CMEK).
- Selecione uma chave no campo Selecionar uma chave do Cloud KMS.
Clique em Salvar para salvar o comando na lista de comandos a serem usados na página Comparar comando salvo.
Clique em Enviar comandos para comparar os comandos e as respostas.
É possível atualizar os comandos e salvar as versões atualizadas como novos comandos.
Comparar com um novo comando
Para comparar o comando salvo com um novo comando, siga estas etapas:
- Clique em Comparar novo comando. Um painel Comparar será exibido.
- Opcional: clique em Mudar modelo para usar um modelo diferente do padrão.
- Opcional: expanda Outputs.
- Opcional: se você quiser que o modelo crie saídas em um formato específico, como JSON, clique no botão Saída estruturada. Depois de selecionar Saída estruturada, as opções de embasamento serão desativadas, porque o embasamento não é aceito com saída estruturada.
- Opcional: mude o Orçamento de pensamento para uma das seguintes opções:
- Automático: o modelo só pensa quando precisa. O modelo ajusta o quanto ele pensa ou analisa uma situação com base no que é necessário no momento.
- Manual: você pode ajustar os tokens de orçamento de pensamento.
- Desativado: nenhum pensamento ou orçamento é usado.
Outputs:
- Opcional: expanda Ferramentas.
- Selecione uma das seguintes opções:
- Embasamento: Google: embasamento com a Pesquisa Google ou o Google Maps.
- Embasamento: seus dados: embasamento com o mecanismo RAG na Gemini Enterprise Agent Platform, na Agent Search ou no Elasticsearch.
- Se você selecionar Embasamento: seus dados, escolha a fonte de dados que quer usar.
Ferramentas:
- Opcional: expanda Avançado:
- Selecione Região.
- Selecione Configurações do filtro de segurança. Uma caixa de diálogo será exibida. Mantenha o padrão de Desativado ou especifique Bloquear poucos, Bloquear alguns ou Bloquear muitos para cada uma das seguintes opções:
- Discurso de ódio: comentários negativos ou prejudiciais relacionados à identidade ou a atributos protegidos.
- Conteúdo perigoso: promove ou permite o acesso a produtos, serviços e atividades prejudiciais.
- Conteúdo sexualmente explícito: contém referências a atos sexuais ou outro conteúdo obsceno.
- Conteúdo de assédio: comentários maliciosos, intimidadores, abusivos ou de bullying direcionados a outra pessoa.
- Clique em Salvar para salvar as configurações e fechar a caixa de diálogo.
- Selecione a temperatura no campo Temperatura. A temperatura controla a aleatoriedade na seleção do token. Uma temperatura mais baixa é boa quando você espera uma resposta verdadeira ou correta. Uma temperatura mais alta pode gerar resultados diversos ou inesperados.
- Selecione o limite de tokens de saída no campo Limite de tokens de saída. O limite de tokens de saída determina a quantidade máxima de saída de texto de um comando. Um token tem cerca de quatro caracteres.
- Selecione o número máximo de respostas no campo Respostas máximas. O número máximo de respostas do modelo geradas por comando. Devido a filtros de segurança ou outras políticas, as respostas ainda podem ser bloqueadas.
- Selecione um valor no campo Top-P. O Top-p muda a forma como the model seleciona tokens para saída.
- Clique no botão de alternância no campo Respostas do modelo de streaming. Se selecionado, as respostas serão impressas à medida que forem geradas.
- Insira uma sequência de paradas no campo Adicionar sequência de paradas. Pressione Enter após cada sequência.
Avançado:
- Clique em Salvar para salvar as mudanças nas configurações.
- Clique em Aplicar.
- Clique em Enviar comandos para comparar os comandos e as respostas.
Para mais informações sobre os limites de tokens de cada modelo, consulte Controlar o orçamento de pensamento.
Comparar com outro comando salvo
Para comparar o comando salvo com outro comando salvo, siga estas etapas:
- Clique em Comparar comando salvo. O painel Comando atual será exibido.
Escolha até dois comandos atuais para comparação.
- Selecione um Nome do comando. Se você tiver muitos comandos na lista, clique no campo Filtro e selecione a propriedade que quer filtrar. Insira um valor e pressione Enter.
- Clique em Aplicar. A página Comparar mostra o comando selecionado ao lado de outros comandos criados ou selecionados para comparação.
Clique em Enviar comandos para comparar os comandos e as respostas.
Comparar com informações empíricas
As informações empíricas são sua resposta preferencial ao comando. Todas as demais respostas são avaliadas com base na resposta de informações empíricas.
Para comparar o comando salvo com informações empíricas, siga estas etapas:
- Clique em Informações empíricas. O painel Informações empíricas será exibido.
- Insira as informações empíricas para gerar métricas de avaliação adicionais.
- Clique em Salvar para salvar as informações empíricas.
- Clique em Enviar comandos para comparar os comandos e as respostas.
As métricas de avaliação geradas ao comparar um comando com informações empíricas não são afetadas pela região selecionada.
A seguir
- Para mais informações sobre como avaliar seus modelos, consulte Visão geral do serviço de avaliação de IA generativa.