robots.txt ' ye aşadağıkilerini yazabilirsiniz.
User-agent: Baiduspider
Disallow: /
User-agent: Baiduspider-video
Disallow: /
User-agent: Baiduspider-image
Disallow: /
teşekkür ederim kodlar için.
peki hocam bu örümcekler veya diğer ipler(spam olan ipler örneğin referer) bu kimlik sorma captcha olayını nasıl geçebiliyor fikriniz var mi?