Google, OpenAI ve Anthropic, içerik scraping’i için yeni kontroller geliştirdi.
Google, OpenAI ve Anthropic, içerik scraping’ini düzenlemek amacıyla yeni bir robots.txt yönergesini destekleme kararı aldı. Bu yeni düzenleme, yayıncıların içeriklerinin yapay zeka (AI) eğitiminde kullanılmasını kontrol etmelerine olanak tanıyacak. Bu gelişme, internetin açık standartlar organizasyonu IETF tarafından önerilen bir taslağın benimsenmesiyle gerçekleşti.
Yeni Yönerge ile Neler Değişecek?
Yeni robots.txt yönergesi, yayıncıların içeriklerinin hangi koşullarda toplanabileceğini belirlemelerine yardımcı olacak. Mevcut durumda, web sitesi sahipleri farklı tarayıcıları tanımlamak ve her sağlayıcı için ayrı kurallar eklemek zorunda kalıyorlardı. Ancak bu yeni düzenleme, birden fazla AI şirketinin tek bir ortak sinyali tanımasını ve bunu dikkate almasını sağlayacak. Yayıncılar, AI eğitimine özel yeni bir kullanıcı ajanı belirleyerek, bu ajanın belirli sayfa bölümlerinin toplanmasına izin verebilecekler.
Yayıncılar İçin Önemli Bir Adım
Örneğin, yayıncılar, yeni kullanıcı ajanı ile belirli içeriklerin toplanmasına izin verebilirken, genel olarak AI eğitimine yönelik veri toplama işlemlerini engelleyebilecekler. Ancak bu yeni düzenleme, geçmişte yapılan scraping işlemlerini geri almayacak; yani daha önce taranan sayfalardaki içerikler, bu yönerge ile silinmeyecek. Bu durum, AI şirketlerinin gelecekte belirli web sitelerinden veri toplamalarını engelleyecek, ancak daha önce topladıkları veriler üzerinde bir etkisi olmayacak.
Gelecekteki Uygulamalar ve Etkileri
Anthropic, bu yeni yönergeyi desteklemeye başladı ve Microsoft’un 1 Şubat 2027’de uygulamaya geçmesi bekleniyor. Google da bu yönergeyi 2027’nin başlarında destekleyeceğini duyurdu. OpenAI ise, bu yeni sinyalin uygulanması için önümüzdeki aylarda adımlar atacağını belirtti. Bu gelişmeler, içerik yayıncıları ve yapay zeka şirketleri arasındaki ilişkilerin daha şeffaf hale gelmesine yardımcı olabilir. Ayrıca, yayıncıların içeriklerinin nasıl kullanıldığı konusunda daha fazla kontrol sahibi olmaları, sektördeki etik tartışmaları da gündeme getirebilir.
Kaynak: Engadget
