spam site botlarının sitemden içerik almasını nasıl engellerim

siteyi yurtdışına kapatmak yeterli bir çözüm olur mu sizce?

Hocam boş yere yabancı trafiği kesmeyin

Robots.txt ye

User-agent:
Disallow: /

Yapın bütün botları

bu kod botları mı engelliyor?

Hocam Google botların siteye girip girmemesine
Robots.txt ile karar verirsiniz
İsterseniz;
User-agent: *
Disallow: /

Bu kod ile bütün botları engellersiniz ama önermem site indexlenmez

googleyi hariç tutmanın bir yolu yok mu peki?

Var tabiki siz bana hangi botların engelleniceğini söyleyin ben size uygun bir robots.txt kodu örneği çıkarıyım 🙂

Cloudflare kurup yurtdışı IP adreslerini engelleyin, Google'a ait olan ve Semrush gibi analiz araçlarının User Agentlarına izin verin.
Ek olarak istek limiti belirleyebilirsiniz türkiye IP'leri için.

Feed'den çekmediğini nasıl biliyorsunuz

Oda olabilir tabi ama bot trafiğini kesmek istediğini söyledi o yüzden ona göre bir çare buldum ☺️