Compara instrucciones

La función Comparar te permite ver cómo una instrucción, un modelo o un parámetro de configuración diferente cambian el resultado del modelo. Puedes ver cada una de las instrucciones y sus respuestas en paralelo para compararlas y analizarlas de las siguientes maneras:

  • Con una instrucción nueva
  • Con otra instrucción guardada
  • Con una verdad fundamental

Antes de comenzar

Para acceder a la función Comparar, sigue estos pasos:

  1. En la Cloud de Confiance consola, ve a la página Crear instrucción.

    Ir a Crear instrucción

  2. Selecciona Comparar. Aparecerá la página Comparar.

Crea una instrucción en la función Comparar

En la página Comparar, puedes crear una instrucción antes de seleccionar otra para comparar los resultados.

Para crear una instrucción, sigue estos pasos:

  1. En el campo Instrucción nueva, ingresa tu instrucción.

  2. Haz clic en Enviar instrucciones. La respuesta del modelo aparece debajo del texto de la instrucción que ingresaste.

  3. Haz clic en Guardar como nueva. Aparecerá el diálogo Guardar instrucción.

  4. Ingresa el nombre de tu nueva instrucción en el campo Nombre de la instrucción.

  5. Selecciona tu región en el campo Región o déjala como la región predeterminada.

  6. Si se aplica una clave de encriptación administrada por el cliente (CMEK), haz lo siguiente:

    1. Selecciona la casilla de verificación Clave de encriptación administrada por el cliente (CMEK).
    2. Selecciona una clave en el campo Selecciona una clave de Cloud KMS.

  7. Haz clic en Guardar, que guarda tu instrucción en la lista de instrucciones para usar en la página Comparar instrucción guardada.

  8. Haz clic en Enviar instrucciones para comparar las instrucciones y sus respuestas.

Puedes actualizar tus instrucciones y guardar las versiones actualizadas como instrucciones nuevas.

Compara con una instrucción nueva

Para comparar tu instrucción guardada con una instrucción nueva, sigue estos pasos:

  1. Haz clic en Comparar nueva instrucción. Aparecerá un panel Comparar.
  2. Opcional: Haz clic en Cambiar modelo para usar un modelo diferente del modelo predeterminado.
  3. Opcional: Expande Outputs.
    4. Outputs:
    1. Opcional: Si quieres que el modelo genere la salida en un formato específico, como JSON, haz clic en el botón de activación Salida estructurada. Después de seleccionar Salida estructurada, las opciones de fundamentación se desactivan, ya que la fundamentación no es compatible con la salida estructurada.
    2. Opcional: Cambia el Presupuesto de pensamiento a una de las siguientes opciones:
      • Automático: El modelo solo piensa cuando es necesario. El modelo ajusta por cuánto tiempo piensa o analiza una situación en función de lo que se necesite en ese momento.
      • Manual: Puedes ajustar los tokens de presupuesto de pensamiento.
      • Desactivado: No se usan presupuestos ni pensamiento.
  1. Opcional: Expande Herramientas.
    2. Herramientas:
    1. Selecciona una de las siguientes opciones:
      • Fundamentación: Google: Fundamentación con la Búsqueda de Google o Google Maps.
      • Fundamentación: Tus datos: Fundamentación con RAG Engine en Gemini Enterprise Agent Platform, Agent Search o Elasticsearch.
        1. Si seleccionas Fundamentación: Tus datos, selecciona la fuente de datos que deseas usar.
  1. Opcional: Expande Avanzado:
    2. Avanzado:
    1. Selecciona la Región.
    2. Selecciona Configuración de filtros de seguridad. Aparecerá un diálogo. Mantén el valor predeterminado de Desactivado o puedes especificar Bloquear pocos, Bloquear algunos o Bloquear la mayoría para cada una de las siguientes opciones:
      • Incitación al odio o a la violencia: Comentarios negativos o dañinos dirigidos a la identidad o los atributos protegidos.
      • Contenido peligroso: Promueve o habilita el acceso a bienes, servicios y actividades perjudiciales.
      • Contenido sexual explícito: Incluye referencias a actos sexuales o a otro contenido obsceno.
      • Contenido de hostigamiento: Comentarios maliciosos, intimidantes, de bullying, o abusivos dirigidos a otra persona.
    3. Haz clic en Guardar para guardar la configuración y cerrar el diálogo.
    4. Selecciona la temperatura en el campo Temperatura. La temperatura controla la aleatorización en la selección de tokens. Una temperatura más baja es buena cuando esperas una respuesta verdadera o correcta. Una temperatura más alta puede generar resultados más diversos o inesperados.
    5. Selecciona el límite de tokens de salida en el campo Límite de tokens de salida. El límite de tokens de salida determina la cantidad máxima de salida de texto que se genera a partir de una instrucción. Un token tiene aproximadamente cuatro caracteres.
    6. Selecciona las respuestas máximas en el campo Respuestas máximas. La cantidad máxima de respuestas del modelo generadas por instrucción. Debido a los filtros de seguridad o a otras políticas, aún se pueden bloquear las respuestas.
    7. Selecciona un valor en el campo Top-P. Top-P cambia la manera en la que el modelo selecciona tokens para el resultado.
    8. Haz clic en el botón de activación en el campo Transmitir respuestas del modelo. Si seleccionado, las respuestas se imprimen a medida que se generan.
    9. Ingresa una secuencia de detención en el campo Agregar secuencia de detención. Presiona Intro después de cada secuencia.
  1. Haz clic en Guardar para guardar los cambios en la configuración.
  2. Haz clic en Aplicar.
  3. Haz clic en Enviar instrucciones para comparar las instrucciones y sus respuestas.

Para obtener más información sobre los límites de tokens de cada modelo, consulta Controla el presupuesto de pensamiento.

Compara con otra instrucción guardada

Para comparar tu instrucción guardada con otra instrucción guardada, sigue estos pasos:

  1. Haz clic en Comparar instrucción guardada. Aparecerá el panel Instrucción existente.

  2. Elige hasta dos instrucciones existentes para comparar.

    1. Selecciona un Nombre de la instrucción. Si tienes muchas instrucciones en tu lista, haz clic en el campo Filtro y selecciona la propiedad por la que deseas filtrar. Ingresa un valor y presiona Intro.
    2. Haz clic en Aplicar. En la página Comparar , se muestra la instrucción que seleccionaste junto con otras instrucciones que creaste o seleccionaste para la comparación.

  3. Haz clic en Enviar instrucciones para comparar las instrucciones y sus respuestas.

Compara con una verdad fundamental

La verdad fundamental es la respuesta preferida para la instrucción. Todas las demás respuestas del modelo se evalúan en función de la respuesta de verdad fundamental.

Para comparar tu instrucción guardada con una verdad fundamental, sigue estos pasos:

  1. Haz clic en Verdad fundamental. Aparecerá el panel Verdad fundamental.
  2. Ingresa tu verdad fundamental para generar métricas de evaluación adicionales.
  3. Haz clic en Guardar para guardar la verdad fundamental.
  4. Haz clic en Enviar instrucciones para comparar las instrucciones y sus respuestas.

Las métricas de evaluación que se generan cuando comparas una instrucción con una verdad fundamental no se ven afectadas por la región que seleccionas.

¿Qué sigue?