robot.txt nasıl yapacagım

arkadaslar bana robot.txt nasıl yapacagım. nereye koyacagım . bana yardımcı olabılırmısınız

robot degil..robots.txt adinda tct olusturup icine asagidakini kopyala ve ftp de ana dizine at..Public_html icine..not: "Sitemap: http://sitemap adresin" kendi sitemap adresinizle degismeyi unutmayin



#ALL BOTS User-agent: *
Disallow: /admincp/
Disallow: /ajax.php
Disallow: /clientscript/
Disallow: /cpstyles/
Disallow: /includes/
Disallow: /install/
Disallow: /images/
Disallow: /modcp/
Disallow: /subscriptions/
Disallow: /customavatars/
Disallow: /customprofilepics/
Disallow: /announcement.php
Disallow: /attachment.php
Disallow: /calendar.php
Disallow: /cron.php
Disallow: /editpost.php
Disallow: /faq.php
Disallow: /image.php
Disallow: /inlinemod.php
Disallow: /joinrequests.php
Disallow: /login.php
Disallow: /memberlist.php
Disallow: /misc.php
Disallow: /moderator.php
Disallow: /newattachment.php
Disallow: /newreply.php
Disallow: /newthread.php
Disallow: /online.php
Disallow: /payment_gateway.php
Disallow: /payments.php
Disallow: /poll.php
Disallow: /postings.php
Disallow: /private.php
Disallow: /profile.php
Disallow: /register.php
Disallow: /report.php
Disallow: /reputation.php
Disallow: /search.php
Disallow: /sendmessage.php
Disallow: /showgroups.php
Disallow: /showpost.php
Disallow: /subscription.php
Disallow: /usercp.php
Disallow: /threadrate.php
Disallow: /usernote.php
Disallow: /member_inlinemod.php
Disallow: /group_inlinemod.php
Disallow: /picture_inlinemod.php
Disallow: /visitormessage.php
Disallow: /threadtag.php
Disallow: /archieve/
Disallow: /ajax.php
Disallow: /converse.php
Disallow: /global.php
Disallow: /picture.php

Sitemap: http://sitemap adresin

tesekkurler

ısmarlama robots.txt olmaz arkadaşlar. Sistemin ne ? eğer bir script kullandıysan bunu belirt ki doğru robots.txt dosyasını yapabilesin mesela oscommerce gibi. maltepeli arkadaşımız sana bir örnek göndermiş fakat oradaki urller senin sitende varmı ?.
Eğer kafan karıştıysa en basitini yap. aşağıya yazıyorum.
işletim sistemin windows ise masaüstünü sağ tıkla - yeni sekmesine gel - metin belgesini tıkla. Masa üstünde oluşan yeni metin belgesi.txt dosyasını çift tıklayarak aşağıdaki kodu kopyalayıp yapıştır. Ve yeni metin balgesinin adını robots.txt yap FTP deki ana dizine "index dosyasının olduğu bölüm" buraya at.
Kontrol etmek için ise tarayıcıya urlyi yazıp kontrol et. örnek seninsiten.com/robots.txt
robots.txt

User-agent: *
Disallow:

yukardaki kod tüm robotları engellemiyor mu?

google Web Yöneticisi Araçlarında şöyle veriyor hangisi doğru acaba?bir üsttekiyle bu hangisi doğru?

User-Agent: *
Allow: /

User-Agent: Googlebot
Allow: /