İstersen robots.txt kullanarak disallow edersin, istersend google wmt den URL KALDIR seçeneğini kullanırsın.