Arkadaşlar herkese selamlar, yıllardır bu sektörün mutfağında olan biri olarak bugün çok kritik bir konuyu aydınlatmak istiyorum. Google, geçtiğimiz günlerde arama motorunun arka planında çalışan sistemlerin sınırlarını resmen açıkladı. (Sayfalarım, içeriklerim index almıyor diyenlere özel bir içeriktir bu.)
Googlebot sitenize geldiğinde her şeyi okumuyor. Sistemin çok net bir veri boyutu sınırı var. Hiç SEO bilmeyen birinin bile rahatça uygulayabileceği şekilde bu gizli limiti ve sitenizi nasıl kurtaracağınızı anlatacağım.
Çoğumuz Googlebot'u internette gezen yorulmak bilmez tek bir adet yazılım parçası sanıyoruz. Aslında durum hiç de böyle işlemiyor. Sunucu kayıtlarınıza baktığınızda kapınızı çalan o bot, devasa bir ağın sadece küçük bir elçisidir. Google Arama, Alışveriş veya AdSense gibi onlarca farklı hizmet, sitenize sürekli ayrı ayrı istekleri gönderiyor. Yani sitenizi tarayan tek bir misafir yok, amaçları farklı devasa bir ordu var.
2 MB Kuralı
2 MB Kuralı, Google'ın bir web sayfasının temel kodunu okurken koyduğu kesin ve net bir barajdır. Diyelim ki sitenizde çok karmaşık kodlar, devasa menüler veya kod içine gömülmüş ağır resimler var. Toplam sayfa boyutunuz 5 MB oldu. Googlebot sitenize geliyor ve sadece en üstteki ilk 2 MB'lık kısmı cebine koyuyor. Geriye kalan koca bir 3 MB'lık kısmı hiç acımadan çöpe atıyor. O sınırın altında kalan yazılarınız, resimleriniz veya anahtar kelimeleriniz Google için artık tamamen yok hükmündedir maalesef.
Sistem o kurtarabildiği ilk ufak veriyi alıp doğrudan kendi okuma ve çizim motoruna aktarıyor. Bu motor, sanki sitenize normal bir tarayıcıdan giriyormuş gibi eksik sayfayı anlamaya çalışıyor. Ancak bu sistem çerezleri veya oturum bilgilerinizi asla aklında tutmaz. Her girişte her şeyi sıfırlar. Sitenizin görünümünü sağlayan dış dosyaları sonradan ayrı ayrı çağırır. Fakat sayfanızın ana iskeleti o 2 MB sınırına takılıp kesildiyse, motor sadece yarım yamalak bir sayfa görür ve sıralamanızı doğrudan dibe çeker.
Ne yapacağız peki?
Sitenizin arka planındaki kod yapısını olabildiğince hafif tutmak zorundasınız. Sayfayı yoran ağır kod bloklarını harici dosyalara taşıyın. En önemli kural ise sıralama mantığıdır. Sitenizin başlığı, etiketleri ve o çok değerli SEO kodları her zaman sayfanın en tepesinde yer almalıdır. Böylece sınır bariyerine takılmadan botun cebine ilk giren veriler olurlar. Sunucunuzun hızına da çok dikkat edin. Yavaş yanıt veren siteleri gören Googlebot, sunucunuzu yormamak için anında geri çekilir ve sitenizi ziyaret etmeyi bırakır. Gerekli optimizasyonu doğru şekilde yaparsanız SEOnuz da güçlü ise index almayan sayfanız kalmaz.