1) Arkadaslar kök dizinde www.domain.com/robots.txt yazınca robots.txt geliyor ama ftp den bakınca böyle bir dosya yok anlamadım ?
2)En iyi robots.txt nasıl olmalı yani içinde ne yazılmalı?