• 06-10-2013, 00:06:53
    #1
    Bu robots.txt de acaba bir sorun var mi böyle kullansam bir sorun olur mu, ben arastirdigim kadariyla sorun yok google icin. Ama yinede sormak istiyorum. Kodlari zaten wordpress.codex den aldim.



    Alıntı
    Sitemap: http://www.siteadresi.com/sitemap.xml

    # Google Image
    User-agent: Googlebot-Image
    Disallow:
    Allow: /*

    # Google AdSense
    User-agent: Mediapartners-Google*
    Disallow:

    # digg mirror
    User-agent: duggmirror
    Disallow: /

    # global
    User-agent: *
    Disallow: /cgi-bin/
    Disallow: /wp-admin/
    Disallow: /wp-includes/
    Disallow: /wp-content/plugins/
    Disallow: /wp-content/cache/
    Disallow: /wp-content/themes/
    Disallow: /trackback/
    Disallow: /feed/
    Disallow: /comments/
    Disallow: /category/*/*
    Disallow: */trackback/
    Disallow: */feed/
    Disallow: */comments/
    Disallow: /*?
    Allow: /wp-content/uploads/
  • 06-10-2013, 00:18:49
    #2
    ne var ne yok engellemişsin
    Boşver sen bunu, Yoast SEO eklentisini kur. Dünyanın en iyi Wordpress SEO eklentisi odur kanımca. Otomatikmen robots.txt'ini çıkartıyor, sana uygun olarak ayarlıyor
  • 06-10-2013, 02:37:06
    #3
    Üyeliği durduruldu
    Sitemap: http://www.siteadresi.com/sitemap.xml
    
    # Google Image
    User-agent: Googlebot-Image
    Disallow:
    
    # Google AdSense
    User-agent: Mediapartners-Google*
    Disallow:
    
    # digg mirror
    User-agent: duggmirror
    Disallow: /
    
    # global
    User-agent: *
    Disallow: /wp-admin/
    Disallow: /wp-includes/
    Allow: /wp-content/uploads/
    bu şekilde güncelleyin
  • 06-10-2013, 02:45:21
    #4
    Phonique adlı üyeden alıntı: mesajı görüntüle
    Sitemap: http://www.siteadresi.com/sitemap.xml
    
    # Google Image
    User-agent: Googlebot-Image
    Disallow:
    
    # Google AdSense
    User-agent: Mediapartners-Google*
    Disallow:
    
    # digg mirror
    User-agent: duggmirror
    Disallow: /
    
    # global
    User-agent: *
    Disallow: /wp-admin/
    Disallow: /wp-includes/
    Allow: /wp-content/uploads/
    bu şekilde güncelleyin
    katılıyorum en faydalısı
  • 06-10-2013, 03:02:26
    #5
    Ne gerek var? Wp zaten kendisi oluşturuyor Robots.txt dosyasını... Ben şuana kadar böyle kullandım ve bir sıkıntı yaşamadım açıkcası...
  • 06-10-2013, 14:36:17
    #6
    GrafiKod adlı üyeden alıntı: mesajı görüntüle
    ne var ne yok engellemişsin
    Boşver sen bunu, Yoast SEO eklentisini kur. Dünyanın en iyi Wordpress SEO eklentisi odur kanımca. Otomatikmen robots.txt'ini çıkartıyor, sana uygun olarak ayarlıyor
    Phonique adlı üyeden alıntı: mesajı görüntüle
    Sitemap: http://www.siteadresi.com/sitemap.xml
    
    # Google Image
    User-agent: Googlebot-Image
    Disallow:
    
    # Google AdSense
    User-agent: Mediapartners-Google*
    Disallow:
    
    # digg mirror
    User-agent: duggmirror
    Disallow: /
    
    # global
    User-agent: *
    Disallow: /wp-admin/
    Disallow: /wp-includes/
    Allow: /wp-content/uploads/
    bu şekilde güncelleyin

    Google Adsense den crawler ile ilgili bir email geldi, robots.txt e ulasamiyorum falan filan diye. zaten benim robots.txt vardi. ama neden yine tekrar güncelleyin falan dedi anlam veremedim.