
Robot-robot pada pameran WAIC 2025 di Shanghai. Foto: Xuthoria, via Wikimedia Commons.
Selama bertahun-tahun, pemilik situs yang tidak ingin kontennya dipakai melatih model kecerdasan buatan harus memasang aturan yang berbeda-beda untuk setiap perusahaan. Satu aturan untuk Google, satu lagi untuk OpenAI, satu lagi untuk Microsoft, dan satu lagi untuk Anthropic. Pada 30 Oktober 2026, empat perusahaan itu mengumumkan sesuatu yang belum pernah terjadi sebelumnya: mereka sepakat menghormati satu sinyal yang sama. Cukup satu baris di robots.txt, dan keempatnya akan membaca penolakan itu dengan cara yang sama.
Sinyal itu bernama __usage_ai-training. Cara kerjanya sengaja dibuat sederhana. Pemilik situs menulis User-Agent: __usage_ai-training, diikuti Disallow: /, di dalam berkas robots.txt. Bila ada bagian situs yang tetap boleh dipakai untuk latihan, pemilik bisa menambahkan pengecualian dengan baris Allow, misalnya Allow: /press-kit/ untuk membuka hanya folder siaran pers. Tidak ada tata bahasa baru, tidak ada berkas baru, dan tidak ada dasbor baru yang harus dipelajari. Yang berubah adalah kesepakatannya: satu token, empat perusahaan, satu makna.
Kesepakatan ini dituangkan dalam sebuah Internet-Draft berjudul Machine-Readable Training Preference Signal, yang ditulis oleh Kevin Kelley dari Anthropic dan bertanggal 30 Oktober 2026. Dokumen itu diajukan ke kelompok kerja AIPREF di Internet Engineering Task Force (IETF), yang diketuai oleh Mark Nottingham dari Cloudflare dan Suresh Krishnan dari Cisco. Tetapi penting untuk memahami statusnya dengan tepat: dokumen ini masih berupa draf individual, bukan standar resmi, dan catatan IETF menegaskan bahwa draf individual tidak didukung oleh IETF dan tidak memiliki kedudukan formal dalam proses standarisasi. Draf ini juga memiliki tanggal kedaluwarsa, yaitu 3 Mei 2027, kecuali diperbarui.
Jadwalnya tidak serentak, dan itu penting
Pengumuman bersama tidak berarti penerapan serentak. Anthropic, yang menulis drafnya, menyatakan sudah mulai menerapkan dukungan untuk token ini sejak pengumuman. OpenAI menyatakan akan menerapkannya dalam beberapa bulan ke depan, tanpa tanggal pasti. Microsoft menargetkan 1 Februari 2027. Google menyatakan menargetkan tahun 2027, juga tanpa tanggal yang lebih rinci. Bagi pemilik situs, perbedaan jadwal ini berarti satu hal yang praktis: aturan lama yang spesifik per perusahaan tetap harus dipertahankan sampai dukungan untuk token bersama benar-benar hidup di masing-masing perusahaan.
Google memberi satu penjelasan tambahan yang relevan bagi banyak penerbit. Bila sebuah situs memakai token bersama untuk menolak latihan dan tidak secara eksplisit menyebut Google-Extended, Google berencana menafsirkannya seolah-olah pemilik juga menolak Google-Extended. Google-Extended sendiri adalah kontrol latihan yang ditawarkan Google sejak 2023, dan Google menegaskan kontrol spesifik perusahaan itu akan terus berfungsi berdampingan dengan sinyal bersama yang baru. Dengan kata lain, sinyal baru ini menambah, bukan menggantikan, perangkat yang sudah ada, setidaknya untuk saat ini.
Microsoft melangkah sedikit lebih jauh dari sekadar token bersama. Perusahaan itu menambahkan pengaturan latihan pada tingkat halaman dan pengaturan terpisah untuk grounding, yaitu langkah pengambilan konten web secara langsung untuk dimasukkan ke dalam jawaban chatbot, yang berbeda dari pelatihan bobot model. Microsoft juga menyatakan bahwa preferensi baru ini menggantikan tag lama NoArchive dan NoCache, dan situs yang memakai tag lama itu diminta mengatur preferensi baru paling lambat 1 Maret 2027, setelah itu tag lama tidak lagi dibaca sebagai preferensi latihan atau grounding. Detail ini menunjukkan bahwa kesepakatan bersama masih memberi ruang bagi masing-masing perusahaan untuk menambahkan lapisannya sendiri.
Apa yang tidak dilakukan sinyal ini
Ada tiga batasan yang harus dipahami agar tidak terjadi harapan yang keliru. Pertama, token ini mengatur izin latihan, bukan perilaku perayapan. Drafnya sendiri menyatakan bahwa token kebijakan ini bukan arahan untuk perilaku perayapan, sehingga menolak latihan tidak menghalangi perayap untuk mengunjungi atau menyimpan salinan halaman. Kedua, menolak latihan tidak membuat halaman hilang dari hasil pencarian biasa, dan tidak pula menghalangi jawaban AI yang mengutip halaman tersebut secara langsung. Ketiga, memperbarui robots.txt hari ini tidak menghapus konten yang sudah dikumpulkan ke dalam dataset yang ada atau sudah dilatihkan ke dalam bobot model. Sinyal ini hanya memblokir latihan di masa depan, bukan membatalkan masa lalu.
Batasan-batasan itu bukan alasan untuk meremehkan kesepakatan ini. Bagi penerbit kecil, termasuk blog, media lokal, dan situs komunitas di Indonesia, beban terbesar selama ini bukan soal filosofi, melainkan soal kerumitan: harus mengikuti satu per satu aturan dari setiap perusahaan, dengan nama dan sintaks yang berbeda. Satu token bersama memangkas kerumitan itu menjadi dua baris. Tetapi karena drafnya masih individual, penerapannya masih bertahap, dan sinyal ini bersifat sukarela tanpa kekuatan penegakan, penerbit yang serius tetap perlu memantau pengumuman lanjutan dari masing-masing perusahaan dan menyimpan aturan lama sampai dukungan baru terverifikasi.
Di hari yang sama, ada peringatan keamanan yang tidak boleh dilewatkan
Pengumuman soal token opt-out ini datang bersamaan dengan kabar keamanan yang menjadi pengingat lain bagi pengguna alat AI. Ekstensi resmi Claude Code versi 2.1.313 di Cursor Marketplace dilaporkan dibajak dan ditanami backdoor SSH persisten, berdasarkan pemberitahuan keamanan resmi dari Cursor yang dikutip dalam rangkuman berita AI pada 31 Oktober 2026. Versi berbahaya yang menyasar build darwin-arm64 dan win32-x64 itu tersedia pada 29 Oktober 2026, sekitar pukul 02.27 sampai 13.35 waktu Pasifik, sebelum akhirnya dihapus. Insiden ini tidak berhubungan langsung dengan token robots.txt, tetapi ia menyentuh sisi yang sama dari kepercayaan terhadap ekosistem AI: bukan hanya soal data apa yang boleh dipakai untuk latihan, melainkan juga soal perangkat apa yang boleh dipercaya untuk dipasang di komputer kerja.
Bagi pembaca yang mengelola situs, dua kabar ini bisa dibaca sebagai satu paket praktis. Periksa robots.txt Anda, tambahkan token bersama bila Anda ingin menolak latihan, tetapi jangan hapus aturan lama sebelum dukungan baru benar-benar berjalan. Periksa juga ekstensi dan perkakas AI yang terpasang, pastikan versinya bersih, dan jangan memasang ulang versi yang pernah dilaporkan bermasalah. Dunia AI sedang bergerak dari masa di mana setiap perusahaan membuat aturannya sendiri menuju masa di mana aturan bersama mulai terbentuk. Tetapi masa peralihan ini, seperti yang ditunjukkan oleh jadwal yang tidak serentak dan insiden keamanan di hari yang sama, adalah masa di mana kehati-hatian justru paling dibutuhkan.
Pada akhirnya, nilai dari kesepakatan 30 Oktober 2026 bukan terletak pada dua baris kodenya, melainkan pada presedennya. Untuk pertama kalinya, empat laboratorium AI terbesar di Barat sepakat membaca satu sinyal yang sama dengan makna yang sama. Apakah preseden ini akan berkembang menjadi standar yang benar-benar mengikat, atau berhenti sebagai draf yang kedaluwarsa pada Mei 2027, akan ditentukan oleh apa yang terjadi setelah pengumuman: apakah OpenAI, Microsoft, dan Google benar-benar menerapkan dukungannya sesuai jadwal, apakah penerbit benar-benar memakainya, dan apakah kelompok kerja IETF berhasil mengubah draf individual ini menjadi sesuatu yang lebih kokoh. Sampai jawaban itu datang, dua baris di robots.txt adalah langkah yang berguna, tetapi bukan garis akhir.