Bu robots.txt'in bir hatası var mı acaba? Başka eklemem gereken bir şey var mı?
Sitem;
www.abcd.com/forum şeklinde. SMF, forum dizinine kurulu.
Alıntı
User-agent: *
Disallow: /cgi-bin/
Disallow: /*ref=
Disallow: /*?ref=*
Disallow: /*Themes/
Disallow: /*smf_scripturl*
Disallow: /*smf_images_url*
Disallow: /*index.php?action=register