Robot.txt nerede bulacam yardım edin

07-05-2014, 17:47:33

deli oldum vallah.

Bir sürü hata bulmus robot.txt engellemis bilmem ne

Sitemap: http://www.asd.com/sitemap.xml

User-agent: Googlebot

Disallow: /wp-content/
Disallow: /trackback/
Disallow: /wp-admin/
Disallow: /feed/
Disallow: /archives/
Disallow: /index.php
Disallow: /*.php$
Disallow: /*.js$
Disallow: /*.css$
Disallow: */feed/
Disallow: */trackback/
Disallow: /page/
Disallow: /tag/
Disallow: /category/

User-agent: Googlebot-Image
Disallow: /wp-includes/

User-agent: ia_archiver
Disallow: /

User-agent: duggmirror
Disallow: /
Sitemap: http://asddsa/sitemap.xml

çikan bu yukardaki robot.txt denetle diyince

site.robottxt girince

User-agent: *
Disallow: /wp-admin/
Disallow: /wp-includes/

User-agent: Mediapartners-Google
Disallow:

Sitemap: http://http://asddas.com//sitemap.xml.gz
Sitemap: http://oasddt.com/sitemap.xml

çikiyor deli etti beni google nasıl bulacam sitemap eklentisine bakıyorum yok nasıl bulacam ne yapim düzeltmek için ciddi düzeyde sorunu varmıs öyle dedi

07-05-2014, 19:12:18

#2

MimariuS

MoonLive adlı üyeden alıntı: mesajı görüntüle

deli oldum vallah.

Bir sürü hata bulmus robot.txt engellemis bilmem ne

Sitemap: http://www.asd.com/sitemap.xml

User-agent: Googlebot

Disallow: /wp-content/
Disallow: /trackback/
Disallow: /wp-admin/
Disallow: /feed/
Disallow: /archives/
Disallow: /index.php
Disallow: /*.php$
Disallow: /*.js$
Disallow: /*.css$
Disallow: */feed/
Disallow: */trackback/
Disallow: /page/
Disallow: /tag/
Disallow: /category/

User-agent: Googlebot-Image
Disallow: /wp-includes/

User-agent: ia_archiver
Disallow: /

User-agent: duggmirror
Disallow: /
Sitemap: http://asddsa/sitemap.xml

çikan bu yukardaki robot.txt denetle diyince

site.robottxt girince

User-agent: *
Disallow: /wp-admin/
Disallow: /wp-includes/

User-agent: Mediapartners-Google
Disallow:

Sitemap: http://http://asddas.com//sitemap.xml.gz
Sitemap: http://oasddt.com/sitemap.xml

çikiyor deli etti beni google nasıl bulacam sitemap eklentisine bakıyorum yok nasıl bulacam ne yapim düzeltmek için ciddi düzeyde sorunu varmıs öyle dedi

sanırım sitenizde farklı robots.txt doyaları mevcut. All in Seo veya Google xml Map bunların ikisinin de robots.txt doyası mevcut. Sadece birini kullanın.
robots.txt ftp hesabınızda ana dizinde bulunur.

07-05-2014, 19:33:13

#3

MoonLive

MimariuS adlı üyeden alıntı: mesajı görüntüle

sanırım sitenizde farklı robots.txt doyaları mevcut. All in Seo veya Google xml Map bunların ikisinin de robots.txt doyası mevcut. Sadece birini kullanın.
robots.txt ftp hesabınızda ana dizinde bulunur.

engellene url gitti gibi simdi 4 tane tarma hatası var onlarda basit geçti gibi yaptıgım ne anlatim :

robot.txt eklentisi kullanıyordum ve kaynak kodu kötümüs degistim googlede buldum 1 tane degisiklik yaptım oldu. google sitemap all in seo filan bulumadım google maplarını.

robot.txt eklentisi devre dışı bırakınca azdılar hemen bende etkilens yaptım.

07-05-2014, 19:52:55

#4

MimariuS

robots.txt için eklentiye gerek yok hocam. Robots.txt kendiniz oluşturup atabilirsiniz dizine

07-05-2014, 19:56:23

#5

~~Stefan4~~

Üyeliği durduruldu

Wordpress kullanıyorsanız alt kısımdaki vermiş olduğum kodu kullanınız.

User-agent: *
Disallow: /wp-admin/
Disallow: /wp-includes/

Sitemap: http://www.asd.com/sitemapindex.xml

Normal bir html ve asp alt yapı kullanıyorsanız alttaki kodu kullanınız.

User-agent: *

Sitemap: http://www.asd.com/sitemapindex.xml

07-05-2014, 20:06:22

#6

MoonLive

Stefan adlı üyeden alıntı: mesajı görüntüle

Wordpress kullanıyorsanız alt kısımdaki vermiş olduğum kodu kullanınız.

User-agent: *
Disallow: /wp-admin/
Disallow: /wp-includes/

Sitemap: http://www.asd.com/sitemapindex.xml

Normal bir html ve asp alt yapı kullanıyorsanız alttaki kodu kullanınız.

User-agent: *

Sitemap: http://www.asd.com/sitemapindex.xml

Sunu kullanıyorum hocam her seyi halletti

User-agent: *
Disallow: /wp-admin/
Disallow: */comments/
Disallow: /wp-content/plugins/
Disallow: /wp-content/cache/
Disallow: /wp-content/themes/
Disallow: /wp-includes/
Disallow: /xmlrpc.php
Sitemap: http://asd.com/sitemap.xml

bunun ekledim panele sorun gitti engellenen url hatası bozmak istemiyorum simdi üsttekinde index bakımından kötü bir sey yok degilmi hocam

07-05-2014, 20:07:27

#7

~~Stefan4~~

Üyeliği durduruldu

Webmaster tools hesabınıza girerek engellenen URL adreslerini yapılandırarak kırık olan link parametreleri var ise bunları düzeltildi olarak import edip ve yeniden değerlendirme talebi ile sorunsuzca halledebilirsiniz.

07-05-2014, 22:56:50

#8

celilcan

Acizane tavsiyem
User-agent: *
Disallow: /wp-admin/
Disallow: /wp-includes/

bunlara ek olarak aşağıdaki kodlarıda kullanmanız. Böylece lüzumsuz sayfa ve arama indekslerinden ref salıdılarından replytocom indexlerinden kurtulabilir lüzumsuz yere ceza almazsınız.

Disallow: /search?
Disallow: /?p=*
Disallow: /*page/*
Disallow: */trackback
Disallow: /*/?replytocom
Disallow: /*/feed
Disallow: /category/*/*
Disallow: /*ref*
Disallow: /search/
Disallow: /*.css$

Ayrıca wordpress için en iyi robotst txt dosyası yazısını okumanızı tavsiye ederim
http://www.teknotrik.com/wordpress-i...t-dosyasi.html