OpenAI, Google, Microsoft ve Anthropic tek bir AI eğitim opt-out sinyalinde buluştu
Dört şirket, sitelerin robots.txt üzerinden "içeriğim AI eğitiminde kullanılmasın" diyebileceği ortak bir sinyali destekleyeceğini açıkladı. Anthropic sinyali uyguluyor; diğerlerinin uygulamaya geçişi 2027'yi bulacak.
OpenAI, Google, Microsoft ve Anthropic, web sitelerinin içeriklerinin AI modeli eğitiminde kullanılmasını tek bir robots.txt sinyaliyle reddedebilmesini destekleyeceklerini 30 Ekim'de duyurdu. Bugüne kadar bir yayıncı eğitimi engellemek istediğinde her şirketin crawler'ını (GPTBot, Google-Extended vb.) ayrı ayrı tanımlamak zorundaydı; yeni yaklaşımda tek satır tüm destekleyen şirketler için geçerli olacak.
Sinyal, Anthropic'ten Kevin Kelley'nin hazırladığı bir IETF taslağına dayanıyor. Kapsamı yalnızca AI eğitimi: kaynaklara göre amaç, eğitim tercihini arama indekslemesi ve arşivlemeden ayırmak.
Kim ne zaman uyguluyor?
Haberlere göre Anthropic sinyali şimdiden uyguluyor. Google, Microsoft ve OpenAI'ın uygulamaya geçişi 2027'de bekleniyor; Microsoft 1 Şubat 2027 tarihini verirken OpenAI ay belirtmedi. Microsoft ayrıca yayıncıların eğitimden ve "grounding"den (model cevabını güncel web içeriğiyle besleme) ayrı ayrı çıkabileceğini, bunun Bing arama sonuçlarını etkilemeyeceğini belirtti. Kaynaklar tarih ayrıntılarında tam örtüşmüyor; kesin takvim için şirketlerin kendi duyurularına bakılmalı.
Neden önemli?
AI şirketleriyle yayıncılar arasındaki en büyük gerilimlerden biri, içeriğin izin alınmadan eğitimde kullanılması. Ortak sinyal, yayıncılar için yönetimi basitleştiriyor ve "aramada görün, eğitime girme" ayrımını standart hale getirmeye çalışıyor. Ancak robots.txt bir rica mekanizması; uymayan crawler'ları teknik olarak durdurmuyor ve yalnızca destekleyen şirketleri bağlıyor.
Kimin işine yarar / ne yapabilirsiniz?
- Haber sitesi, blog veya kurumsal içerik yayıncısıysanız: mevcut crawler bazlı engellerinizi şimdilik kaldırmayın; diğer şirketler 2027'de uygulayana kadar geçerliliklerini koruyorlar.
- Sitenizin robots.txt dosyasını tarayıcıda alan-adiniz/robots.txt adresinden açarak hangi crawler engellerinin tanımlı olduğunu görebilirsiniz.
- Eğitim ile arama görünürlüğünü ayrı yönetmek istiyorsanız IETF taslağını ve şirketlerin uygulama notlarını takip edin.
- Uymayan botlara karşı sunucu veya CDN tarafında ayrıca bot yönetimi değerlendirin.
