İpucu: Hangisi doğru? Robots.txt mi? Robot.txt mi?

Hangisi doğru? Robots.txt mi? Robot.txt mi?
Webmaster dünyasına yeni atılan birçok kişi, bu metin belgesinin fonksiyonunu dahi bilmemektedir. Bilenler ise birçok hata yapmaktadır. Aslında mantıken düşündüğümüzde cevabı kendi kendimize verebiliriz. Örneğin; Google amcanın üzerinde birkaç test yaparak, rahatlıkla doğru olanı öğrenme imkanımız var. Gelin Google amca üzerinde birkaç deneme yapalım…

Browserimizin adres çubuğuna ilk olarak aşağıdaki adresi yazıyoruz:

Alıntı

http://www.google.com/robot.txt

Eğer, doğru dosya adı robot.txt ise, dosya içerisindeki yazıları görebiliriz. Ancak o da ne!

Alıntı

www.google.com/robot.txt sayfası yok.

Demek ki robot.txt değilmiş. Peki, ne? robots.txt mi? Ona da bakalım:

Alıntı

http://www.google.com/robots.txt

Evet, işte bulduk. Google amca robots.txt kullanıyormuş. Demek ki doğru olan robots.txt imiş.

NOT: robots.txt sadece Google botu için değildir, tüm botlar için geçerlidir.

Kaynak: www.seoteknigi.com

robots.txt sadece google bota özgü olan bir dosya olmadığını belirterek, içerisinde kullanılan botlar için kullanılan komutlarıda açıklayıcı olarak yazsaydınız güzel olurdu bence

yinede teşekkürler.

Tabii ki, zaten o yüzden Google'de inceledim. Google bile robots.txt kullandığına göre başka robotlarda olduğu fikirni çıkartabiliriz.

bilgi için tskler...

Rica ederim.