robots.txt ile engellemeyi denediniz mi (doğru anlamışsam)