Cloudflare ve OpenAI’ın temmuz ayında başlattığı proje, klasik arama motorlarının gözden kaçırabildiği web sayfalarını ChatGPT’nin arama dizinine kazandırmayı hedefliyor. Yaklaşımın merkezinde, siteler arasındaki bağlantıları izlemek yerine Cloudflare ağı üzerindeki gerçek kullanıcı trafiğinden elde edilen sinyallerden yararlanmak var.
Geleneksel web tarayıcıları, yeni sayfaları çoğunlukla başka sayfalardan verilen bağlantıları takip ederek buluyor. Bu yöntem, internetteki görünür içeriklerin büyük bölümünü kapsasa da bağlantı almayan bazı sayfalar arama sonuçlarının dışında kalabiliyor. Örneğin bir ürünün kullanım kılavuzu, küçük bir işletmenin menüsü ya da belirli bir ihtiyaca yanıt veren yerel içerikler, başka siteler tarafından işaret edilmediğinde keşfedilemeyebiliyor.

Yeni yöntem ise kullanıcıların gerçekten ziyaret ettiği sayfalara ilişkin trafik örüntülerine odaklanıyor. Cloudflare’in ağından gelen sinyaller, geleneksel tarayıcıların ulaşamadığı yüz milyonlarca sayfanın tespit edilmesine yardımcı oluyor. Böylece ChatGPT araması için daha geniş ve daha çeşitli bir içerik dizini oluşturulması amaçlanıyor.
TRAFİK SİNYALLERİYLE DAHA VERİMLİ TARAMA
Bu modelin olası faydalarından biri de otomatik tarayıcıların kaynak kullanımını azaltması. Tarayıcılar zaman zaman artık mevcut olmayan sayfalara, yinelenen içeriklere ya da düşük değerli adreslere istek gönderebiliyor. Trafik sinyallerinden yararlanılması, hangi sayfaların gerçekten ziyaret edildiğini göstermesi bakımından tarama kaynaklarının daha verimli kullanılmasına katkı sağlayabilir.

Proje, güvenlik değerlendirmeleri açısından da dikkat çekiyor. Bir alan adındaki tek bir sayfanın sorunlu olması, sitenin tamamının zararlı olduğu anlamına gelmeyebilir. Sayfa düzeyinde değerlendirme yapılması, sitenin geri kalan içeriklerinin arama görünürlüğünün korunmasına yardımcı olabilir. Ancak bu tür ayrımların proje içinde teknik olarak nasıl uygulandığına ilişkin ayrıntıların ayrıca netleşmesi gerekiyor.
Daha fazla sayfanın dizine eklenmesi, yayıncılar ve site sahipleri için yeni bir keşif kanalı anlamına gelebilir. Buna karşın dizine girmek, otomatik olarak daha fazla ziyaretçi kazanılacağı anlamına gelmiyor. ChatGPT üzerinden web sitelerine yönlendirilen trafik, tıklanma oranları ve yapay zekâ tarayıcılarının içeriklere erişiminin nasıl yönetileceği, projenin etkisini belirleyecek başlıklar arasında yer alıyor.
Haber Kaynağı : 12punto