Google dışındaki botlar için; Kökten Engelleme
https://github.com/JayBizzle/Crawler-Detect

Googlebot ziyaret sınırı için;
https://www.google.com/webmasters/tools/settings?pli=1