OpenAI (GPT) Tarayıcı Botunu Engelleme

OpenAI (GPT), bir web tarayıcı robotu (crawler bot) işletiyor.

Temelde, GPT de daha fazla öğrenmek ve güncellenebilmek için veri toplaması gerektiğinden web taraması yapıyor,

başlangıçta Vikipedi verilerini ve çeşitli haber kuruluşlarının haberlerini kullandığı ve ayrıca çok sayıda web tarayıcı robotu çalıştırdığı için tartışmalara yol açtığı, ancak şu anda resmi olarak GPTBot'u çalıştırdığı ve söz konusu robotun robots.txt dosyasına uyarak engellenirse veri toplamayı durduracağı belirtiliyor.

İlgili içerik: https://platform.openai.com/docs/bots

Örneğin, robots.txt dosyasına

gibi bir içerik yazarsanız, yalnızca GPTBot engellenir ve

yeni yayınlanan GPTSearch'ü izin verip, GPTBot'u engellemek istiyorsanız, aşağıdaki gibi yapabilirsiniz.

Gerekli kısımları uygun şekilde kullanarak GPT'nin yetkisiz web tarama işlemini engelleyebilirsiniz.