robots.txt'ye bakmak güzel fikir.