Batı'nın en büyük dört yapay zekâ şirketi bir konuda anlaştı ve anlaştıkları şey bir robots.txt dosyasına sığıyor.
OpenAI, Google, Microsoft ve Anthropic 30 Ekim'de `__usage_ai-training` adlı ortak "politika jetonunu" tanıyacaklarını açıkladı. Jeton, bir site sahibinin yapay zekâ eğitimi tercihini her şirketle ayrı ayrı pazarlık etmek yerine tek seferde beyan etmesini sağlıyor. Mekanizma mevcut robots.txt dilbilgisini yeniden kullanıyor:
``` User-Agent: __usage_ai-training Disallow: / ```
Bu tek grup, katılan her tarayıcıya sitenin içeriğinin eğitim için kapalı olduğunu söylüyor. İstisna tanımak isteyen siteler bunu `Allow:` satırlarıyla belirliyor.
Öneri, Anthropic'in standartlar biriminde teknik lider olan Kevin Kelley'den geliyor ve 30 Ekim tarihli, 3 Mayıs 2027'de süresi dolacak bireysel bir IETF İnternet Taslağı olarak kayıtlı: "Machine-Readable Training Preference Signal". Bireysel taslak, IETF standardı değildir ve standart sürecinde resmî bir ağırlığı yoktur. Bu ayrıntı akılda tutulmalı, çünkü duyuru bir standart gibi okunuyor ama henüz standart değil.
Jeton ne yapıyor, ne yapmıyor
- Eğitimi düzenliyor, çekmeyi değil. Taslağın kendi ifadesiyle jeton "tarama davranışı için bir yönerge değil". Bir bot sayfayı yine de alabilir; yalnızca ondan öğrenmemesi beklenir. - Geriye işlemiyor. robots.txt'ye satır eklemek, hâlihazırda bir veri kümesine toplanmış ya da bir modele işlenmiş hiçbir şeyi geri almıyor. - Bu bir güvenlik kontrolü değil, koordinasyon. OpenAI mekanizmayı RFC 9309 çerçevesinde anlatıyor: uymak istemeyen tarayıcı görmezden gelebilir ve en çok kozu ihtiyaç duyanlar — küçük yayıncılar — en az kozu olanlar.
Takvimler eşit değil; asıl hikâye de burada. Anthropic desteği uygulamaya başladığını söylüyor. OpenAI sinyali "önümüzdeki aylarda" uygulamayı hedefliyor. Microsoft 1 Şubat 2027'yi hedefliyor ve eğitimle "grounding"i — canlı sayfaların yanıtlara çekilmesini — ayrı anahtarlar olarak tutmayı planlıyor. Google 2027 diyor ve bir site jetonla çıkış yapıp Google-Extended'ı ayrıca adlandırmazsa bunu Google-Extended için de ret olarak okuyacağını belirtiyor. Google'dan John Mueller, jetonun sitelerin "yapay zekâ eğitim tercihlerini tek adımda birden çok sağlayıcıya" bildirmesine yardımcı olacağını söyledi.
Meta katılmadı. İletişim başkanı Andy Stone ortak bir sinyalin "önemli bir adım" olduğunu söyledi ve şirketin diğer yapay zekâ şirketleriyle standartlar ve uygulama konusunda çalışmayı beklediğini ekledi: ilke düzeyinde destek, uygulama taahhüdü yok.
Yine de neden önemli
Üç yıldır yapay zekâ eğitiminden çıkmanın tek yolu her laboratuvar için ayrı, farklı yazımlı bir istisna tutmaktı: burada Google-Extended, orada tarayıcıya özel bir user-agent, nezaket işe yaramadığında bir IP bloğu. Bu asimetri, operasyonel işi karşılayabilen büyük yayıncıların lehineydi ve geri kalan herkesi tahmine bırakıyordu. Tek jeton, "hayır" demenin maliyetinde gerçek bir düşüş. Katılımcı listesi sektörün bunu bildiğini gösteriyor: taslağın tartışmasında Meta, Cloudflare, Common Crawl Foundation, News Corp, Financial Times, BBC, Electronic Frontier Foundation ve Creative Commons var.
Ayrıca aynı kavganın yoğun bir ayına denk geliyor. Cloudflare artık yapay zekâ tarayıcılarını varsayılan olarak engelliyor; Really Simple Licensing (RSL) standardı yayıncılara tarayıcı erişimini fiyatlandırma imkânı veriyor. Dört sağlayıcının uyacağını vaat ettiği gönüllü bir jeton, aynı soruna farklı bir yaklaşım: duvar değil, teamül.
Sınav basın bülteni değil. Sınav, jetonun bireysel değil çalışma grubu belgesi olarak geri dönüp dönmeyeceği; dördünün değerli bir site çıkış yaptığında kendi çıkarına rağmen buna uyup uymayacağı; ve imza sahiplerinin dışından — başta Meta — kimsenin takip edip etmeyeceği.
