Bot Tersertifikasi Cloudflare Kini Dinilai Terus-Menerus, Bukan Sekali Seumur Hidup

Surat pengemudi membuktikan identitas seseorang dan kesanggupannya menyetir saat ujian. Ia tidak membuktikan pengemudi itu akan setia mematuhi rambu setiap hari. Analogi itulah yang dipakai Cloudflare dalam pos resmi 16 Oktober 2026 untuk mengumumkan sistem baru: identitas bot terversifikasi bukan jaminan perilaku, dan perilakunya kini dinilai terus-menerus.

Tiga Kriteria Bot Tersertifikasi

Sejak dulu Cloudflare menjalankan program bot Verified dengan tiga syarat: bot harus mengidentifikasi diri secara tepat dan aman, hanya melakukan yang dijanjikan, dan tidak melakukan tindakan kasar. Identitas itu sendiri kini ditopang teknologi Web Bot Auth, yaitu tanda tangan kriptografis pada permintaan, yang katalognya dicatat dalam format terbuka di BotBase.

Yang bergeser hari ini justru kriteria kedua: dari pernyataan identitas yang tetap, ke bukti perilaku yang terus diperbarui.

Antara Risiko dan Kepercayaan

Cloudflare membedakan dua istilah:

• Risiko menilai kemungkinan satu permintaan atau aksi tertentu membahayakan; nilainya bisa berubah seketika.
• Kepercayaan dibangun dari perilaku yang konsisten sepanjang waktu.

Presedennya sudah ada. Pada 2025, Cloudflare mencoret bot Perplexity dari daftar bot Verified setelah data menunjukkan ia menyelundupkan akses ke situs yang menolak di-crawl dan kemudian berusaha mengelabui kontrol.

Band Kepercayaan yang Bisa Dijelaskan

Sistem baru mengukur seberapa sering bot merespons preferensi situs, lalu menerjemahkan temuan itu ke band kepercayaan. Band ini bukan vonis permanen: ia memperlihatkan rentang konsistensi dan perilaku apa yang mendasarinya.

Dua sinyal awal yang dinilai: apakah bot mengikuti instruksi yang diberikan, dan apakah ia merespons masukan langsung dari pemilik situs. Cloudflare menyebut keduanya "aturan akal sehat" - bentuk sopan santun bagi pihak yang menyiapkan informasi. Skor kepercayaan direncanakan tampil publik di direktori bots Radar, dan metrik penilaiannya akan diperluas seiring waktu.

robots.txt: Aturan Minimal Yang Sering Disalahartikan

Sebuah robots.txt adalah sarana utama pemilik situs menyampaikan preferensi. Sistem Cloudflare menimbang apakah lalu lintas yang teramati konsisten dengan preferensi yang dipublikasikan itu, dengan acuan RFC 9309. Pelanggaran terisolasi tak serta-merta menjatuhkan hukuman; yang dicari adalah pola berulang yang mengabaikan preferensi situs.

Satu catatan penting yang ditekankan Cloudflare: robots.txt adalah aturan minimal, bukan izin menyeluruh. Yang tidak tertulis di sana tidak berarti bebas dilakukan, misalnya jika situs menyampaikan penolakan melalui sinyal lain.

HTTP 429: Sinyal Bagi Bot yang Tahu Diri

Bot juga bisa berpindah jalur yang diizinkan sambil tetap memberatkan situs. Cara paling jelas pemilik situs menolaknya adalah HTTP 429 (Too Many Requests), sinyal untuk menurunkan laju, kadang disertai panduan berapa lama menunggu.

Sistem baru menimbang apakah lalu lintas bot menyesuaikan diri setelah menerima sinyal itu: melambat, berhenti, atau tetap membanjiri. Penurunan laju yang konsisten menaikkan kepercayaan; pengabaian berulang menurunkannya.

Lingkar Akuntabilitas yang Lengkap

Sistem ini melengkapi dua komponen yang sudah ada. Bot Preference Sync membantu pemilik situs mempublikasikan preferensinya, dan Bot Management menentukan bagaimana lalu lintas itu ditangani. Dengan band kepercayaan, ketiganya membentuk lingkar: preferensi dipublikasikan, perilaku diamati, keputusan ditindaklanjuti.

Untuk saat ini Cloudflare memakai sistem tersebut internal untuk membangun riwayat perilaku bot Verified. Tahap berikutnya, sistem akan dibuka ke semua pelanggan Cloudflare yang nantinya dapat memilih ambang kepercayaan sebagai dasar penanganan lalu lintas bot.

Maksud akhirnya jelas, tulis Cloudflare: kepercayaan harus diperoleh lewat perilaku yang transparan dan bertanggung jawab, bukan diasumsikan dari identitas semata.