Modul 04 · 12 menit

Rubrik dan Set Pengujian

Uji prompt, lindungi data, cegah instruksi berbahaya dari sumber luar, dan catat setiap perubahan versi.

Ditulis dan disunting oleh Cahyanto Arie Wibowo. Terakhir ditinjau · versi 1.2.

Apa inti dari “Rubrik dan Set Pengujian” dalam praktik?

Di bagian ini, Anda akan membuat set pengujian dan rubrik yang mewakili kondisi penggunaan nyata. Cobalah Rubrik dan Set Pengujian pada satu kasus kecil lebih dahulu. Catat hasil yang Anda harapkan, tanda-tanda kegagalan, dan kapan keputusan perlu diperiksa kembali. Anda akan membuat satu keputusan kecil dengan Rubrik dan Set Pengujian, lengkap dengan batas dan tanda kapan keputusan itu perlu diperiksa kembali.

Model visual untuk “Rubrik dan Set Pengujian” dalam Prompting: hubungan antarbagiannya sama penting dengan setiap bagian secara terpisah.

Setelah lesson ini

  • Membuat set pengujian dan rubrik yang mewakili kondisi penggunaan nyata.
  • Menggunakan konsep “Rubrik dan Set Pengujian” untuk membaca satu situasi nyata.
  • Menjelaskan batas konsep dan informasi yang masih perlu diperiksa.

Mulai dari situasi

Pahami situasinya lebih dulu. Istilahnya bisa menyusul.

Prompt yang bekerja baik minggu ini dapat menghasilkan jawaban berbeda setelah model diperbarui. Di bagian ini, Anda akan melihat situasi tersebut melalui konsep “Rubrik dan Set Pengujian”. Tujuannya bukan mencari satu istilah yang menjawab semua masalah, melainkan memahami pilihan yang tersedia dengan lebih jernih.

Di bagian ini, Anda akan membuat set pengujian dan rubrik yang mewakili kondisi penggunaan nyata. Uji prompt, lindungi data, cegah instruksi berbahaya dari sumber luar, dan catat setiap perubahan versi. Hubungkan konsep ini dengan keputusan yang benar-benar perlu Anda buat.

Model visual

Petakan setiap bagiannya sebelum menentukan langkah.

Model visual untuk “Rubrik dan Set Pengujian” dalam Prompting: hubungan antarbagiannya sama penting dengan setiap bagian secara terpisah.

Baca diagram sebagai peta Rubrik dan Set Pengujian: mulai dari konteksnya, ikuti hubungan antarbagiannya, lalu periksa titik yang disorot sebelum mengambil keputusan.

Mari lihat cara kerjanya

Cara membacanya dalam situasi nyata

Cobalah Rubrik dan Set Pengujian pada satu kasus kecil lebih dahulu. Catat hasil yang Anda harapkan, tanda-tanda kegagalan, dan kapan keputusan perlu diperiksa kembali. Mulailah dari hal yang dapat Anda amati, lalu pisahkan fakta, asumsi, dan pertanyaan yang masih belum terjawab.

Prompt yang bekerja baik minggu ini dapat menghasilkan jawaban berbeda setelah model diperbarui. Pada kasus itu, tandai bagian yang paling berkaitan dengan topik ini. Contoh ini membantu Anda berpikir, tetapi bukan bukti bahwa satu solusi akan cocok untuk semua situasi.

Definisi kerja

Apa artinya, dan kapan kita perlu berhati-hati.

Di bagian ini, Anda akan membuat set pengujian dan rubrik yang mewakili kondisi penggunaan nyata. Uji prompt, lindungi data, cegah instruksi berbahaya dari sumber luar, dan catat setiap perubahan versi. Hubungkan konsep ini dengan keputusan yang benar-benar perlu Anda buat.

Rubrik dan Set Pengujian
Di bagian ini, Anda akan membuat set pengujian dan rubrik yang mewakili kondisi penggunaan nyata. Cobalah Rubrik dan Set Pengujian pada satu kasus kecil lebih dahulu. Catat hasil yang Anda harapkan, tanda-tanda kegagalan, dan kapan keputusan perlu diperiksa kembali. Anda akan membuat satu keputusan kecil dengan Rubrik dan Set Pengujian, lengkap dengan batas dan tanda kapan keputusan itu perlu diperiksa kembali.
Batas yang perlu diperiksa
Jangan perlakukan isi dokumen dari luar sebagai instruksi yang selalu dapat dipercaya. Kesalahan ini biasanya muncul ketika istilah dipakai lebih cepat daripada pemahaman terhadap masalahnya. Tuliskan asumsi yang Anda pakai agar orang lain dapat memeriksanya.

Berhenti sejenak

Bukti apa yang bisa mengubah keputusan ini?

Jawab sebelum membuka pembahasan. Sebutkan satu fakta dan satu asumsi.

Buka pembahasan

Di bagian ini, Anda akan membuat set pengujian dan rubrik yang mewakili kondisi penggunaan nyata. Cobalah Rubrik dan Set Pengujian pada satu kasus kecil lebih dahulu. Catat hasil yang Anda harapkan, tanda-tanda kegagalan, dan kapan keputusan perlu diperiksa kembali. Anda akan membuat satu keputusan kecil dengan Rubrik dan Set Pengujian, lengkap dengan batas dan tanda kapan keputusan itu perlu diperiksa kembali.

Coba sendiri

Cobalah pada satu bagian kecil dari pekerjaan Anda.

  1. Pilih satu situasi nyata yang berkaitan dengan Rubrik dan Set Pengujian.
  2. Pisahkan hal yang dapat Anda amati dari hal yang masih berupa asumsi.
  3. Tulis satu keputusan, penanggung jawab, dan bukti untuk memeriksanya.
  4. Sebutkan sinyal yang membuat Anda berhenti atau mengubah arah.

Tulis dua contoh yang sesuai dengan Rubrik dan Set Pengujian dan satu contoh yang tidak sesuai. Jelaskan perbedaannya dengan bahasa Anda sendiri. Jika ingin melanjutkan, Anda juga dapat mencoba latihan modul berikut: Bandingkan beberapa jawaban tanpa melihat nama model, lalu catat versi yang paling baik dan alasannya. Buat versi pertama cukup kecil agar orang lain dapat memeriksanya dalam beberapa menit.

Jalan pintas yang menggoda

Istilah yang terdengar familiar belum tentu membantu Anda mengambil keputusan yang tepat.

Mengapa ini terasa masuk akal

Jangan perlakukan isi dokumen dari luar sebagai instruksi yang selalu dapat dipercaya. Kesalahan ini biasanya muncul ketika istilah dipakai lebih cepat daripada pemahaman terhadap masalahnya. Tuliskan asumsi yang Anda pakai agar orang lain dapat memeriksanya.

Cara memeriksanya

Cobalah Rubrik dan Set Pengujian pada satu kasus kecil lebih dahulu. Catat hasil yang Anda harapkan, tanda-tanda kegagalan, dan kapan keputusan perlu diperiksa kembali. Mulailah dari hal yang dapat Anda amati, lalu pisahkan fakta, asumsi, dan pertanyaan yang masih belum terjawab.

Latihan singkat

Tulis dua contoh yang sesuai dengan Rubrik dan Set Pengujian dan satu contoh yang tidak sesuai. Jelaskan perbedaannya dengan bahasa Anda sendiri. Jika ingin melanjutkan, Anda juga dapat mencoba latihan modul berikut: Bandingkan beberapa jawaban tanpa melihat nama model, lalu catat versi yang paling baik dan alasannya.

Ringkasan

  • Membuat set pengujian dan rubrik yang mewakili kondisi penggunaan nyata.
  • Gunakan contoh dan bukti untuk menguji pemahaman.
  • Catat batas, risiko, dan kondisi ketika keputusan harus ditinjau ulang.

Lanjutkan dari sini

GEO

  • Prompt Injection dan Privasi: Lanjutkan gagasan dari Evaluasi, Keamanan, dan Penggunaan Ulang melalui contoh yang masih berkaitan.
  • Set Contoh Acuan dan Rubrik: Hubungkan pelajaran ini dengan Applied AI, lalu uji idenya dalam konteks lain.
  • TF-IDF: Lihat bagaimana keputusan yang sama berubah ketika dibahas melalui Data Literacy.

Sumber dan bacaan lanjut

  • OWASP Top 10 for Large Language Model Applications: OWASP Foundation · industry-standard. Rujukan utama untuk definisi, bukti, atau batas yang dibahas dalam “Rubrik dan Set Pengujian”.
  • Safety best practices: OpenAI · official-documentation. Bukti dan konteks tambahan untuk memeriksa penjelasan dalam “Rubrik dan Set Pengujian”.
  • Evaluation best practices: OpenAI · official-documentation. Bukti dan konteks tambahan untuk memeriksa penjelasan dalam “Rubrik dan Set Pengujian”.