robots.txt dosyanıza

User-Agent: *
Disallow: /
User-agent: Yandex
Allow: /

Şeklinde yapmanız halinde mantık olarak botları engeller ve sadece yandex'e izin verir. Tabi bu kesin bir çözüm değildir, robots.txt kurallarına uymayan botlar vs. vardır