Buradaki sorun Disallow: / satırı. Bu komut, belirtilen Allow yolları dışında tüm sitenin indekslenmesini engelliyor.
User-agent: *
Disallow: /
Allow: /index.php
Allow: /iletisim.php
Allow: /hakkimizda.php
Allow: /gizlilik.php
Allow: /question.php
Aynen öyle benım en büyük hatam burada.
question.php sayfası soruların yanıtlandığı soruların görüntülendiği sayfa.
Her soru question.php uzantısı ile değilde siteadi.com/soru-basligi seklinde görüntüleniyor.
Ben tamamını kapsar diye sadece "question.php" a izin verdim. Açıkcası soru sayfalarına nasıl izin vereceğimide düşünemedim.