İpucu: Robot.txt'nin Mobil Botlar İçin Ayarlanması

Dün Almanya'dan bir arkadaş uyardı ele almamı istedim, konuyu ilginç ve önemli görüp ele almak istedim. (sayfamda resimli olarak da düzenliyorum, tamamlayınca buraya da ekleyeceğim)

"GoogleBot"un tüm dizinimizi taraması için şunu yazıyorduk;

User-agent: GoogleBot
Disallow:

Test aracında aynı işlemin "Googlebot-Mobil" için yapılmasını istediğimizde ise durum şöyle bir hal alıyor;

User-agent: Googlebot-Mobile
Allow:/

Eğer Google Robots Test aracında deneme yaparsanız, "GoogleBot" seçildiğinde "Disallow:" ın, "Googlebot-Mobile" seçildiğinde ise "Allow:/" satırlarının yeşile döndüklerini yani botlara izin verildiklerini görebilirsiniz.

Yani kısaca; Normal botların geçişine izin vermek için "Disallow:" kullanılırken, mobil botların geçişine izin vermek için "Allow:/" kullanınız. Aksi halde mobil sayfalarınızın botlar tarafından okunmaması ve dolayısıyla hem seo hem de trafik anlamında kayıp yaşayabilmeniz anlamına geliyor.

Bilemiyorum, bu belki de bir hatadır. Ya da yeni bir düzenlemeye falan gidiliyordur. Yanlış kullanımların ciddi hit kaybına sebep olduğunu biliyor ve özellikle mobil girişlerle ilgili sorun yaşayanların durumu kontrol etmesinin önemli olduğunu düşünüyorum.

Kaynak: http://www.seobilog.com/2015/05/goog...s-kullanm.html

Sevgiler
.

kardeşim eğer dediğin doğruysa sana büyük bir teşekkürüm var, çünkü güncellemeden sonra sitem mobil uyumlu olmasına rağmen benim sitemde ki içerikler mobil olarak görünmüyor hitlerde %80 azalma oldu, deneyip bilgi vereceğim

Edit: Aşağıda ki kodu kullanıyorum denedim hepsine yeşil yandı izin verildi uyarısı aldım.
User-agent: *
Allow: /

Ama benim sorun devam ediyor

Yanlış kullanıyorsunuz.
Googlebot ayrı algılıyor, Google Mobil bot ayrı algılıyor. Bende bu garipliği anlatmaya çalışmıştım. Mobil bot için ayrı olarak allow kullanarak belirtin. Tümünde derseniz olmuyor.
.

hocam bu komut sadece ayrı mobil sitesi olanlar için mi geçerli, yoksa responsive olan veya eklenti ile mobil site yapan siteler içindemi geçerli ?

İkisini de kullanmıyorum sorun yok sanırım

ben robots.txt kullanmıyorum arama motorları için bir kayıp mı bu? Mobil uyumlu kurumsal web sitem var?

Bu sorunun cevabını ben de merak ettim doğrusu..?

kullanmadığımız halde de indexliyor farkeden ne orasını anlamadım?

google üzerinden kaynak var mı?

* yeterli olduğunu gösteriyor o farklılık yapılacaksa kullanılması gerektiğini bildiriyor. Yanlışım varsa düzeltin.
https://support.google.com/webmaster.../1061943?hl=tr

teşekkürler hocam.