Modul 05 · 16 menit

Token dan Konteks

Bangun gambaran sederhana tentang jaringan saraf, token, konteks, AI generatif, dan alasan model dapat mengarang informasi.

Ditulis dan disunting oleh Cahyanto Arie Wibowo. Terakhir ditinjau · versi 1.2.

Bagaimana konsep “Token dan Konteks” memengaruhi keputusan yang kita buat?

Di bagian ini, Anda akan memahami token dan batas konteks melalui contoh teks yang benar-benar dapat dihitung. Lihat Token dan Konteks dari informasi yang tersedia. Tanyakan siapa yang bertanggung jawab atas hasilnya dan apa yang mungkin terjadi jika asumsi awal ternyata keliru. Tujuannya sederhana: memakai Token dan Konteks untuk membuat keputusan lebih jelas, bukan sekadar menambah istilah baru.

Model visual untuk “Token dan Konteks” dalam AI untuk Semua: hubungan antarbagiannya sama penting dengan setiap bagian secara terpisah.

Setelah lesson ini

  • Memahami token dan batas konteks melalui contoh teks yang benar-benar dapat dihitung.
  • Menggunakan konsep “Token dan Konteks” untuk membaca satu situasi nyata.
  • Menjelaskan batas konsep dan informasi yang masih perlu diperiksa.

Mulai dari situasi

Pahami situasinya lebih dulu. Istilahnya bisa menyusul.

Model bahasa menyusun kalimat dengan memprediksi kelanjutan yang masuk akal. Model tidak mengambil jawaban dari satu basis data yang selalu benar. Di bagian ini, Anda akan melihat situasi tersebut melalui konsep “Token dan Konteks”. Tujuannya bukan mencari satu istilah yang menjawab semua masalah, melainkan memahami pilihan yang tersedia dengan lebih jernih.

Di bagian ini, Anda akan memahami token dan batas konteks melalui contoh teks yang benar-benar dapat dihitung. Bangun gambaran sederhana tentang jaringan saraf, token, konteks, AI generatif, dan alasan model dapat mengarang informasi. Hubungkan konsep ini dengan keputusan yang benar-benar perlu Anda buat.

Jangan buru-buru memilih

Dua cara melihat Token dan Konteks

Berguna ketika

  • Memahami token dan batas konteks melalui contoh teks yang benar-benar dapat dihitung.
  • Menggunakan konsep “Token dan Konteks” untuk membaca satu situasi nyata.
  • Di bagian ini, Anda akan memahami token dan batas konteks melalui contoh teks yang benar-benar dapat dihitung. Bangun gambaran sederhana tentang jaringan saraf, token, konteks, AI generatif, dan alasan model dapat mengarang informasi. Hubungkan konsep ini dengan keputusan yang benar-benar perlu Anda buat.

Berhenti dan periksa

  • Bahasa yang terdengar lancar dapat menyembunyikan fakta keliru, sumber palsu, atau asumsi yang tidak terlihat. Cara paling sederhana untuk menghindarinya adalah meminta contoh, bukti, dan kondisi ketika pendekatan tersebut gagal. Tuliskan asumsi yang Anda pakai agar orang lain dapat memeriksanya.
  • Menjelaskan batas konsep dan informasi yang masih perlu diperiksa.

Pilihan yang lebih kuat adalah pilihan yang bukti, penanggung jawab, dan batasnya dapat dijelaskan, bukan sekadar pilihan yang terlihat lebih canggih.

Model visual

Petakan setiap bagiannya sebelum menentukan langkah.

Model visual untuk “Token dan Konteks” dalam AI untuk Semua: hubungan antarbagiannya sama penting dengan setiap bagian secara terpisah.

Baca diagram sebagai peta Token dan Konteks: mulai dari konteksnya, ikuti hubungan antarbagiannya, lalu periksa titik yang disorot sebelum mengambil keputusan.

Mari lihat cara kerjanya

Cara membacanya dalam situasi nyata

Lihat Token dan Konteks dari informasi yang tersedia. Tanyakan siapa yang bertanggung jawab atas hasilnya dan apa yang mungkin terjadi jika asumsi awal ternyata keliru. Mulailah dari hal yang dapat Anda amati, lalu pisahkan fakta, asumsi, dan pertanyaan yang masih belum terjawab.

Model bahasa menyusun kalimat dengan memprediksi kelanjutan yang masuk akal. Model tidak mengambil jawaban dari satu basis data yang selalu benar. Coba bandingkan keputusan sebelum dan sesudah konsep “Token dan Konteks” ikut dipertimbangkan. Contoh ini membantu Anda berpikir, tetapi bukan bukti bahwa satu solusi akan cocok untuk semua situasi.

Berhenti sejenak

Bukti apa yang bisa mengubah keputusan ini?

Jawab sebelum membuka pembahasan. Sebutkan satu fakta dan satu asumsi.

Buka pembahasan

Di bagian ini, Anda akan memahami token dan batas konteks melalui contoh teks yang benar-benar dapat dihitung. Lihat Token dan Konteks dari informasi yang tersedia. Tanyakan siapa yang bertanggung jawab atas hasilnya dan apa yang mungkin terjadi jika asumsi awal ternyata keliru. Tujuannya sederhana: memakai Token dan Konteks untuk membuat keputusan lebih jelas, bukan sekadar menambah istilah baru.

Jalan pintas yang menggoda

Istilah yang terdengar familiar belum tentu membantu Anda mengambil keputusan yang tepat.

Mengapa ini terasa masuk akal

Bahasa yang terdengar lancar dapat menyembunyikan fakta keliru, sumber palsu, atau asumsi yang tidak terlihat. Cara paling sederhana untuk menghindarinya adalah meminta contoh, bukti, dan kondisi ketika pendekatan tersebut gagal. Tuliskan asumsi yang Anda pakai agar orang lain dapat memeriksanya.

Cara memeriksanya

Lihat Token dan Konteks dari informasi yang tersedia. Tanyakan siapa yang bertanggung jawab atas hasilnya dan apa yang mungkin terjadi jika asumsi awal ternyata keliru. Mulailah dari hal yang dapat Anda amati, lalu pisahkan fakta, asumsi, dan pertanyaan yang masih belum terjawab.

Coba sendiri

Cobalah pada satu bagian kecil dari pekerjaan Anda.

  1. Pilih satu situasi nyata yang berkaitan dengan Token dan Konteks.
  2. Pisahkan hal yang dapat Anda amati dari hal yang masih berupa asumsi.
  3. Tulis satu keputusan, penanggung jawab, dan bukti untuk memeriksanya.
  4. Sebutkan sinyal yang membuat Anda berhenti atau mengubah arah.

Gunakan satu pekerjaan yang Anda kenal. Tandai informasi yang sudah ada, yang masih berupa asumsi, dan yang perlu diuji terkait konsep “Token dan Konteks”. Jika ingin melanjutkan, Anda juga dapat mencoba latihan modul berikut: Periksa tiga jawaban AI dan tandai setiap klaim yang perlu diverifikasi. Buat versi pertama cukup kecil agar orang lain dapat memeriksanya dalam beberapa menit.

Latihan singkat

Gunakan satu pekerjaan yang Anda kenal. Tandai informasi yang sudah ada, yang masih berupa asumsi, dan yang perlu diuji terkait konsep “Token dan Konteks”. Jika ingin melanjutkan, Anda juga dapat mencoba latihan modul berikut: Periksa tiga jawaban AI dan tandai setiap klaim yang perlu diverifikasi.

Ringkasan

  • Memahami token dan batas konteks melalui contoh teks yang benar-benar dapat dihitung.
  • Gunakan contoh dan bukti untuk menguji pemahaman.
  • Catat batas, risiko, dan kondisi ketika keputusan harus ditinjau ulang.

Lanjutkan dari sini

  • Mengapa Model Bisa Mengarang: Lanjutkan gagasan dari Model Modern dan AI Generatif melalui contoh yang masih berkaitan.
  • Pemantauan: Hubungkan pelajaran ini dengan Applied AI, lalu uji idenya dalam konteks lain.
  • Kemampuan dan Keandalan: Lihat bagaimana keputusan yang sama berubah ketika dibahas melalui Prompting.

Sumber dan bacaan lanjut