AI Eğitimi İçin Ortak robots.txt Sinyali: Google ve Bing Ne Dedi?

30 Ekim 2026'da IETF Datatracker'a girilen bireysel bir taslak, web sitelerinin robots.txt dosyasında içeriklerinin yapay zekâ eğitiminde kullanılmasına karşı (ya da lehine) tercih bildirmesi için ortak bir belirteç, __usage_ai-training, tanımlıyor; Google ve Microsoft Bing aynı gün yayımladıkları kendi yazılarında bu belirteci destekleme planlarını açıkladı. Bu sayfa, taslağın kendi metnini ve iki şirketin kendi blog yazılarını esas alır. Taslak henüz bir standart değildir.

Künye

Taslak Ne Tanımlıyor?

robots.txt, sitelerin arama ve tarama programlarına hangi yollara girilebileceğini söylediği düz metin dosyasıdır. Taslak bu dosyaya yeni bir komut eklemiyor; yalnızca yeni bir grup adı tanımlıyor. Taslaktaki örnek şöyle:

User-Agent: __usage_ai-training
Disallow: /
Allow: /press-kit/

Taslağa göre bu grup, site genelinde yapay zekâ eğitimine karşı tercih bildirir; /press-kit/ yolunda ise lehine tercih bildirir. Yol eşleşmesi mevcut robots.txt kurallarına göre yapılır. Grup adı büyük küçük harfe bakılmadan tam eşleşir ve User-Agent: * satırı bu belirteçle eşleşme sayılmaz. Hiçbir grup belirteci anmıyorsa tercih bildirilmemiş kabul edilir.

Bu Bir Tarama Komutu Değil

Taslak belirtecin bir tarama davranışı komutu olmadığını söylüyor. Tüketici taraflar tercihleri taramayı yönlendirmek için kullanabilir, ama kullanmak zorunda değildir. Özel anlaşmalar da tercihin yerine geçebilir. Yani belirteç bir tercih beyanıdır; teknik olarak erişimi engelleyen bir mekanizma değildir.

Statü: Standart mı?

Hayır. Datatracker sayfasında belge bireysel bir taslak olarak, yalnızca "I-D Exists" durumuyla görünüyor. Metin, IETF tarafından onaylanmadığını ve IETF standart sürecinde resmî bir konumu olmadığını açıkça yazıyor. Taslak 3 Mayıs 2027'de süresi dolacak bir ilk sürümdür (-00). Dolaşımdaki "standart oldu" ya da "zorunlu oldu" ifadeleri bu nedenle yanlıştır.

Google'ın Açıklaması

Google'ın Search Central blogunda 30 Ekim 2026'da yayımlanan "Supporting a shared AI training control for websites" yazısı John Mueller imzalı. Yazıya göre, bir site paylaşılan belirteçle eğitimden çıkmayı seçmişse ve Google-Extended için ayrıca bir kural belirtmemişse, Google bunu Google-Extended'ı engellemiş gibi yorumlamayı planlıyor. Takvim olarak yazı bu kontrolü diğer yapay zekâ sağlayıcılarıyla birlikte 2027'de desteklemeyi hedeflediklerini söylüyor. Yani bugün çalışan bir destek değil, bir plandır.

Microsoft Bing'in Açıklaması

Bing Blog'da yine 30 Ekim 2026'da Krishna Madhavan imzasıyla yayımlanan "Your content, your choice" yazısı iki ayrı ayar tanımlıyor: AI Training ve AI Grounding. Eğitim tercihi robots.txt'te aynı __usage_ai-training belirteciyle ya da sayfa düzeyinde meta etiket veya HTTP başlığıyla verilebiliyor; sayfa düzeyindeki ayar robots.txt'i geçersiz kılıyor. Grounding tercihi ise yalnızca sayfa düzeyinde veriliyor; seçenekler Allow (varsayılan), DisallowExtended ve Disallow. Microsoft'a göre bu ayarlar Bing arama uygunluğunu değiştirmiyor, ancak Disallow seçenekleri yapay zekâ deneyimlerindeki görünürlüğü azaltıyor.

Site Sahipleri İçin Ne Anlama Geliyor?

Şirket yazıları, mevcut kontrollerin (Google-Extended gibi) çalışmaya devam ettiğini söylüyor; yeni belirteç bunların yerine değil, yanına ekleniyor. Bing tarafında ise NoArchive ve NoCache etiketlerinin yapay zekâ tercihi olarak okunması 1 Mart 2027'den sonra bitiyor. Bir site sahibi için pratik sonuç, tarihlerin Google ve Bing yazılarında ayrı ayrı verilmiş olması ve hiçbirinin bugün geçerli bir zorunluluk getirmemesidir. Genel kavramlar için teknoloji nedir sayfasına bakılabilir.

Bu Sayfada Ne Yok?

• OpenAI'nin taahhüt metni yok. OpenAI'nin kendi sayfası okunamadı; bu nedenle OpenAI'nin takvimi yazılmadı.
• Anthropic'in ayrı bir kurumsal açıklaması yok. Yalnızca taslağın yazarının Anthropic bağlantılı olarak listelendiği doğrulandı; kurumsal taahhüt doğrulanamadı.
• Standart ya da zorunluluk iddiası yok. Taslak IETF onaylı değildir ve tüketiciler için bağlayıcı değildir.
• Dört şirketin ortak yazarlığı iddiası yok. Taslağın tek yazarı Kevin Kelley'dir.
• Google için "2027 başı" kesinliği yok. Bu sayfada yalnızca blog yazısındaki "2027" ifadesi aktarıldı.
• Hukuki bağlayıcılık değerlendirmesi yok. Tercihlerin telif ya da veri koruma hukuku açısından ne anlama geldiği yazılmadı.
• Kurulum ya da kapatma tavsiyesi yok. Sayfa yalnızca duyurulanları aktarır.

Sık Sorulan Sorular

Ortak robots.txt belirteci nedir?

Taslağın tanımladığı __usage_ai-training grup adıdır; bir site bu grupla içeriğinin yapay zekâ eğitiminde kullanılmasına karşı ya da lehine tercih bildirir.

Bu bir standart mı?

Hayır. Belge bireysel bir Internet-Draft'tır; IETF onayı ve resmî standart konumu yoktur.

Google bu belirteci ne zaman destekleyecek?

Google'ın blog yazısı bunu diğer sağlayıcılarla birlikte 2027'de desteklemeyi hedeflediklerini söylüyor; kesin gün verilmiyor.

Bing yeni tercihleri ne zaman dikkate alacak?

Bing yazısına göre Microsoft, tararken yeni tercihleri 1 Şubat 2027'den itibaren dikkate almaya başlıyor.

Eğitim ve grounding aynı şey mi?

Bing yazısında ikisi bağımsız ayarlar olarak ayrılıyor. Eğitim robots.txt'te ya da sayfada, grounding yalnızca sayfa düzeyinde ayarlanıyor.

User-Agent: * satırı bu tercihi kapsar mı?

Taslağa göre hayır; joker grup bu belirteçle eşleşme sayılmaz.

Kaynak ve kapsam: Taslak metni IETF Datatracker'daki draft-kelley-aipref-training-preference-signal sayfasından, Google bilgileri Google Search Central Blog'un 30 Ekim 2026 tarihli yazısından, Bing bilgileri Bing Blog'un 30 Ekim 2026 tarihli yazısından alınmıştır. OpenAI ve Anthropic'in kurumsal taahhütleri, hukuki sonuçlar ve kurulum tavsiyesi okunamadığı ya da kaynakta bulunmadığı için yazılmamıştır. Veri tarihi: 1 Kasım 2026.