robots.txt dosyasında, botların siteniz üzerindeki davranışlarına müdahale edebilir ve sitemap dosyanızı tanıtabilirsiniz.
.htaccess dosyası ise apache websunucusunun site üzerindeki konfigurasyon ayarlarının bulunduğu dosyadır. Link rewrite vb. işlemlerini yapabilirsiniz.