Konu
Huawei PetalSearch Arama motoru
22-05-2024, 23:04:52
#6
anilguler
esquare adlı üyeden alıntı:
mesajı görüntüle
Sitesine giremiyorum. Ayrıca botları hayvan gibi cpu tüketiyor. Engellemek istemiyorum. Yok mu yavaşlatmanın yolu?
User-agent: PetalBot
Crawl-delay: 20
Robots.txt ekle
c