Modul 05 · 16 menit
Token dan Konteks
Bangun gambaran sederhana tentang jaringan saraf, token, konteks, AI generatif, dan alasan model dapat mengarang informasi.
Ditulis dan disunting oleh Cahyanto Arie Wibowo. Terakhir ditinjau · versi 1.2.
Bagaimana konsep “Token dan Konteks” memengaruhi keputusan yang kita buat?
Di bagian ini, Anda akan memahami token dan batas konteks melalui contoh teks yang benar-benar dapat dihitung. Lihat Token dan Konteks dari informasi yang tersedia. Tanyakan siapa yang bertanggung jawab atas hasilnya dan apa yang mungkin terjadi jika asumsi awal ternyata keliru. Tujuannya sederhana: memakai Token dan Konteks untuk membuat keputusan lebih jelas, bukan sekadar menambah istilah baru.
Setelah lesson ini
- Memahami token dan batas konteks melalui contoh teks yang benar-benar dapat dihitung.
- Menggunakan konsep “Token dan Konteks” untuk membaca satu situasi nyata.
- Menjelaskan batas konsep dan informasi yang masih perlu diperiksa.
Mulai dari situasi
Pahami situasinya lebih dulu. Istilahnya bisa menyusul.
Model bahasa menyusun kalimat dengan memprediksi kelanjutan yang masuk akal. Model tidak mengambil jawaban dari satu basis data yang selalu benar. Di bagian ini, Anda akan melihat situasi tersebut melalui konsep “Token dan Konteks”. Tujuannya bukan mencari satu istilah yang menjawab semua masalah, melainkan memahami pilihan yang tersedia dengan lebih jernih.
Di bagian ini, Anda akan memahami token dan batas konteks melalui contoh teks yang benar-benar dapat dihitung. Bangun gambaran sederhana tentang jaringan saraf, token, konteks, AI generatif, dan alasan model dapat mengarang informasi. Hubungkan konsep ini dengan keputusan yang benar-benar perlu Anda buat.
Jangan buru-buru memilih
Dua cara melihat Token dan Konteks
Berguna ketika
- Memahami token dan batas konteks melalui contoh teks yang benar-benar dapat dihitung.
- Menggunakan konsep “Token dan Konteks” untuk membaca satu situasi nyata.
- Di bagian ini, Anda akan memahami token dan batas konteks melalui contoh teks yang benar-benar dapat dihitung. Bangun gambaran sederhana tentang jaringan saraf, token, konteks, AI generatif, dan alasan model dapat mengarang informasi. Hubungkan konsep ini dengan keputusan yang benar-benar perlu Anda buat.
Berhenti dan periksa
- Bahasa yang terdengar lancar dapat menyembunyikan fakta keliru, sumber palsu, atau asumsi yang tidak terlihat. Cara paling sederhana untuk menghindarinya adalah meminta contoh, bukti, dan kondisi ketika pendekatan tersebut gagal. Tuliskan asumsi yang Anda pakai agar orang lain dapat memeriksanya.
- Menjelaskan batas konsep dan informasi yang masih perlu diperiksa.
Pilihan yang lebih kuat adalah pilihan yang bukti, penanggung jawab, dan batasnya dapat dijelaskan, bukan sekadar pilihan yang terlihat lebih canggih.
Model visual
Petakan setiap bagiannya sebelum menentukan langkah.
Baca diagram sebagai peta Token dan Konteks: mulai dari konteksnya, ikuti hubungan antarbagiannya, lalu periksa titik yang disorot sebelum mengambil keputusan.
Mari lihat cara kerjanya
Cara membacanya dalam situasi nyata
Lihat Token dan Konteks dari informasi yang tersedia. Tanyakan siapa yang bertanggung jawab atas hasilnya dan apa yang mungkin terjadi jika asumsi awal ternyata keliru. Mulailah dari hal yang dapat Anda amati, lalu pisahkan fakta, asumsi, dan pertanyaan yang masih belum terjawab.
Model bahasa menyusun kalimat dengan memprediksi kelanjutan yang masuk akal. Model tidak mengambil jawaban dari satu basis data yang selalu benar. Coba bandingkan keputusan sebelum dan sesudah konsep “Token dan Konteks” ikut dipertimbangkan. Contoh ini membantu Anda berpikir, tetapi bukan bukti bahwa satu solusi akan cocok untuk semua situasi.
Berhenti sejenak
Bukti apa yang bisa mengubah keputusan ini?
Jawab sebelum membuka pembahasan. Sebutkan satu fakta dan satu asumsi.
Buka pembahasan
Di bagian ini, Anda akan memahami token dan batas konteks melalui contoh teks yang benar-benar dapat dihitung. Lihat Token dan Konteks dari informasi yang tersedia. Tanyakan siapa yang bertanggung jawab atas hasilnya dan apa yang mungkin terjadi jika asumsi awal ternyata keliru. Tujuannya sederhana: memakai Token dan Konteks untuk membuat keputusan lebih jelas, bukan sekadar menambah istilah baru.
Jalan pintas yang menggoda
Istilah yang terdengar familiar belum tentu membantu Anda mengambil keputusan yang tepat.
Mengapa ini terasa masuk akal
Bahasa yang terdengar lancar dapat menyembunyikan fakta keliru, sumber palsu, atau asumsi yang tidak terlihat. Cara paling sederhana untuk menghindarinya adalah meminta contoh, bukti, dan kondisi ketika pendekatan tersebut gagal. Tuliskan asumsi yang Anda pakai agar orang lain dapat memeriksanya.
Cara memeriksanya
Lihat Token dan Konteks dari informasi yang tersedia. Tanyakan siapa yang bertanggung jawab atas hasilnya dan apa yang mungkin terjadi jika asumsi awal ternyata keliru. Mulailah dari hal yang dapat Anda amati, lalu pisahkan fakta, asumsi, dan pertanyaan yang masih belum terjawab.
Coba sendiri
Cobalah pada satu bagian kecil dari pekerjaan Anda.
- Pilih satu situasi nyata yang berkaitan dengan Token dan Konteks.
- Pisahkan hal yang dapat Anda amati dari hal yang masih berupa asumsi.
- Tulis satu keputusan, penanggung jawab, dan bukti untuk memeriksanya.
- Sebutkan sinyal yang membuat Anda berhenti atau mengubah arah.
Gunakan satu pekerjaan yang Anda kenal. Tandai informasi yang sudah ada, yang masih berupa asumsi, dan yang perlu diuji terkait konsep “Token dan Konteks”. Jika ingin melanjutkan, Anda juga dapat mencoba latihan modul berikut: Periksa tiga jawaban AI dan tandai setiap klaim yang perlu diverifikasi. Buat versi pertama cukup kecil agar orang lain dapat memeriksanya dalam beberapa menit.
Latihan singkat
Gunakan satu pekerjaan yang Anda kenal. Tandai informasi yang sudah ada, yang masih berupa asumsi, dan yang perlu diuji terkait konsep “Token dan Konteks”. Jika ingin melanjutkan, Anda juga dapat mencoba latihan modul berikut: Periksa tiga jawaban AI dan tandai setiap klaim yang perlu diverifikasi.
Ringkasan
- Memahami token dan batas konteks melalui contoh teks yang benar-benar dapat dihitung.
- Gunakan contoh dan bukti untuk menguji pemahaman.
- Catat batas, risiko, dan kondisi ketika keputusan harus ditinjau ulang.
Lanjutkan dari sini
- Mengapa Model Bisa Mengarang: Lanjutkan gagasan dari Model Modern dan AI Generatif melalui contoh yang masih berkaitan.
- Pemantauan: Hubungkan pelajaran ini dengan Applied AI, lalu uji idenya dalam konteks lain.
- Kemampuan dan Keandalan: Lihat bagaimana keputusan yang sama berubah ketika dibahas melalui Prompting.
Sumber dan bacaan lanjut
- Machine Learning Glossary: Google for Developers · official-documentation. Rujukan utama untuk definisi, bukti, atau batas yang dibahas dalam “Token dan Konteks”.
- Artificial Intelligence Risk Management Framework: Generative Artificial Intelligence Profile: NIST · official-framework. Bukti dan konteks tambahan untuk memeriksa penjelasan dalam “Token dan Konteks”.
- Safety best practices: OpenAI · official-documentation. Bukti dan konteks tambahan untuk memeriksa penjelasan dalam “Token dan Konteks”.