Wordpress için robots dosyası

14-07-2014, 20:17:55

Kimlik doğrulama veya yönetimden onay bekliyor.

Wordpress teknoloji blogum var şu kodları kullanıyorum bi eksigi yada yanlışı varmı ?

User-agent: Googlebot

Sitemap:http://www.habertekno.net/sitemap.xml
Sitemap:http://www.habertekno.net/sitemap.xml.gz

Disallow: /wp-content/
Disallow: /trackback/
Disallow: /wp-admin/
Disallow: /archives/
Disallow: /index.php
Disallow: /*.php$
Disallow: /*.js$
Disallow: /*.css$
Disallow: */feed/
Disallow: */trackback/

User-agent: Googlebot-Image
Disallow: /wp-includes/

User-agent: ia_archiver
Disallow: /

User-agent: duggmirror
Disallow: /

User-agent: Yandex

Disallow: /wp-content/
Disallow: /trackback/
Disallow: /wp-admin/
Disallow: /archives/
Disallow: /index.php
Disallow: /*.php$
Disallow: /*.js$
Disallow: /*.css$
Disallow: */feed/
Disallow: */trackback/

User-agent: Googlebot-Image
Disallow: /wp-includes/

User-agent: ia_archiver
Disallow: /

User-agent: duggmirror
Disallow: /

15-07-2014, 22:30:51

#2

~~pan_river~~

Üyeliği durduruldu

http://seo.bilgibak.net/robots.txt tavsiye ederim

15-07-2014, 22:41:12

#3

RekoPlay

Kimlik doğrulama veya yönetimden onay bekliyor.

http://kraloyuns.com/robots.txt

şeklinde rahatlıkla yeterli. sizin yazdığınız 2 ayrı arama motoru için düzenli ve aynı ayarlar.tekrarına gerek yoktu yani. hepsi için kullanacağınız bir yapı olacağından tüm arama motorları vs için bu örnekteki çok rahat şekilde yeterlidir.

15-07-2014, 23:12:56

#4

AVKAN

Takip

15-07-2014, 23:24:09

#5

yedmutim

User-agent: * 
Disallow: /wp-admin/ 
Disallow: /wp-includes/  

Sitemap: http://www.site.tld/sitemap.xml

O kadar.