Arama sonuçlarında bir kaç konu buldum. Fakat çeşitli kodlar verilmiş.
Genellikle
User-Agent: yahooslurp
Disallow: /
Bu ve buna benzer kodları robots.txt dosyasında denedim. Yaho botlarına engel olamadım malesef. Sitede deli gibi dolaşıyorlar. IP ile banlamaya kalksam uzun iş.
Çünkü meret 50 den fazla IP ile geliyor her zaman. Buna kesin çözüm bulabilen varmı ?