Membandingkan perintah

Fitur Bandingkan memungkinkan Anda melihat bagaimana perintah, model, atau setelan parameter yang berbeda mengubah output model. Anda dapat melihat setiap perintah dan responsnya secara berdampingan untuk membandingkan dan menganalisis dengan cara berikut:

  • Dengan perintah baru.
  • Dengan perintah tersimpan lainnya.
  • Dengan kebenaran nyata.

Sebelum memulai

Untuk mengakses fitur Bandingkan, ikuti langkah-langkah berikut:

  1. Di Cloud de Confiance konsol, buka halaman Buat perintah.

    Buka Buat perintah

  2. Pilih Bandingkan. Halaman Bandingkan akan muncul.

Membuat perintah di fitur Bandingkan

Di halaman Bandingkan, Anda dapat membuat perintah sebelum memilih perintah lain untuk membandingkan hasilnya.

Untuk membuat perintah, ikuti langkah-langkah berikut:

  1. Di kolom Perintah Baru, masukkan perintah Anda.

  2. Klik Kirim perintah. Respons model akan muncul di bawah teks perintah yang Anda masukkan.

  3. Klik Simpan sebagai baru. Dialog Simpan perintah akan muncul.

  4. Masukkan nama perintah baru Anda di kolom Nama perintah.

  5. Pilih region Anda di kolom Region, atau biarkan sebagai region default.

  6. Jika kunci enkripsi yang dikelola pelanggan (CMEK) berlaku, lakukan hal berikut:

    1. Centang kotak Kunci enkripsi yang dikelola pelanggan (CMEK).
    2. Pilih kunci dari kolom Pilih kunci Cloud KMS.

  7. Klik Simpan, yang akan menyimpan perintah Anda dalam daftar perintah yang akan digunakan di halaman Bandingkan perintah tersimpan.

  8. Klik Kirim perintah untuk membandingkan perintah dan responsnya.

Anda dapat memperbarui perintah, dan menyimpan versi yang diperbarui sebagai perintah baru.

Membandingkan dengan perintah baru

Untuk membandingkan perintah tersimpan dengan perintah baru, ikuti langkah-langkah berikut:

  1. Klik Bandingkan perintah baru. Panel Bandingkan akan muncul.
  2. Opsional: Klik Ganti model untuk menggunakan model lain dari model default.
  3. Opsional: Luaskan Output.
    4. Output:
    1. Opsional: Jika Anda ingin model menghasilkan output dalam format tertentu seperti JSON, klik tombol Output terstruktur. Setelah Anda memilih Output terstruktur, opsi Grounding akan dinonaktifkan, karena grounding tidak didukung dengan output terstruktur.
    2. Opsional: Ubah Anggaran penalaran ke salah satu opsi berikut:
      • Otomatis: Model hanya berpikir saat diperlukan. Model menyesuaikan seberapa banyak model berpikir atau menganalisis situasi berdasarkan apa yang diperlukan pada saat itu.
      • Manual: Anda dapat menyesuaikan token anggaran penalaran.
      • Nonaktif: Tidak ada penalaran atau anggaran yang digunakan.
  1. Opsional: Luaskan Alat.
    2. Alat:
    1. Pilih salah satu opsi berikut:
      • Grounding: Google: Grounding dengan Google Penelusuran atau Google Maps.
      • Grounding: Data Anda: Grounding dengan Mesin RAG di Gemini Enterprise Agent Platform, Agent Search, atau Elasticsearch.
        1. Jika Anda memilih Grounding: Data Anda, pilih sumber data yang ingin Anda gunakan.
  1. Opsional: Luaskan Lanjutan:
    2. Lanjutan:
    1. Pilih Region.
    2. Pilih Setelan Filter Keamanan. Dialog akan muncul. Pertahankan default Nonaktif, atau Anda dapat menentukan Blokir beberapa, Blokir sebagian, atau Blokir sebagian besar untuk setiap opsi berikut:
      • Ujaran kebencian: Komentar negatif atau berbahaya yang menargetkan identitas atau atribut yang dilindungi.
      • Konten berbahaya: Mempromosikan atau memungkinkan akses ke barang, layanan, dan aktivitas berbahaya.
      • Konten eksplisit seksual: Berisi referensi ke tindakan seksual atau konten cabul lainnya.
      • Konten pelecehan: Komentar berbahaya, mengintimidasi, menindas, atau kasar yang menargetkan individu lain.
    3. Klik Simpan untuk menyimpan setelan dan menutup dialog.
    4. Pilih suhu dari kolom Suhu. Suhu mengontrol keacakan dalam pemilihan token. Temperatur yang lebih rendah akan efektif jika Anda mengharapkan respons yang benar atau tepat. Suhu yang lebih tinggi dapat menyebabkan hasil yang beragam atau tidak terduga.
    5. Pilih batas token output dari kolom Batas token output bidang. Batas token output menentukan jumlah maksimal output teks dari satu perintah. Token terdiri atas sekitar empat karakter.
    6. Pilih respons maksimum dari kolom Respons maks. Jika jumlah maksimum respons model yang dihasilkan per perintah. Karena filter keamanan atau kebijakan lainnya, respons masih dapat diblokir.
    7. Pilih nilai dari kolom Top-P. Top-p mengubah cara model memilih token untuk output.
    8. Klik tombol di kolom Respons model streaming. Jika dipilih, respons akan dicetak saat respons tersebut dihasilkan.
    9. Masukkan urutan berhenti di kolom Tambahkan urutan berhenti. Tekan Enter setelah setiap urutan.
  1. Klik Simpan untuk menyimpan perubahan pada setelan Anda.
  2. Klik Terapkan.
  3. Klik Kirim perintah untuk membandingkan perintah dan responsnya.

Untuk mengetahui informasi selengkapnya tentang batas token untuk setiap model, lihat Mengontrol anggaran penalaran.

Membandingkan dengan perintah tersimpan lainnya

Untuk membandingkan perintah tersimpan dengan perintah tersimpan lainnya, ikuti langkah-langkah berikut:

  1. Klik Bandingkan perintah tersimpan. Panel Perintah yang Ada akan muncul.

  2. Pilih hingga dua perintah yang ada untuk dibandingkan.

    1. Pilih Nama perintah. Jika Anda memiliki banyak perintah dalam daftar, klik di kolom Filter, lalu pilih properti yang ingin Anda gunakan untuk memfilter. Masukkan nilai, lalu tekan Enter.
    2. Klik Terapkan. Halaman Bandingkan menampilkan perintah yang telah Anda pilih bersama perintah lain yang telah Anda buat atau pilih untuk dibandingkan.

  3. Klik Kirim perintah untuk membandingkan perintah dan responsnya.

Membandingkan dengan kebenaran nyata

Kebenaran nyata adalah jawaban yang Anda pilih atas perintah. Semua respons model lainnya dievaluasi terhadap jawaban kebenaran nyata.

Untuk membandingkan perintah tersimpan dengan kebenaran nyata, ikuti langkah-langkah berikut:

  1. Klik Kebenaran nyata. Panel Kebenaran nyata akan muncul.
  2. Masukkan kebenaran nyata Anda untuk membuat metrik evaluasi tambahan.
  3. Klik Simpan untuk menyimpan kebenaran nyata.
  4. Klik Kirim perintah untuk membandingkan perintah dan responsnya.

Metrik evaluasi yang dihasilkan saat Anda membandingkan perintah dengan kebenaran nyata tidak terpengaruh oleh region yang Anda pilih.

Langkah berikutnya