robots dosyası değişir robots dosyasından kastımız robotların hangi dosyalarını görmesini hangilerini görmemesini sağlamak ama iyi bir tarama için sitemap adresinizi robots da belirtin