• 23-08-2014, 20:38:24
    #1
    Merhaba arkdaşlar robots.txt dosyasına ihtiacım var nasıl bişey hazırlayabilirim? şuan ki kullandığım şu şekilde

    User-agent: * 
    Disallow: /admincp/
    Disallow: /includes/
    Disallow: /modcp/
    Disallow: /customavatars/
    Disallow: /images/
    Disallow: /clientscript/
    Disallow: /ajax.php
    Disallow: /attachment.php
    Disallow: /calendar.php
    Disallow: /cron.php
    Disallow: /editpost.php
    Disallow: /global.php
    Disallow: /image.php
    Disallow: /inlinemod.php
    Disallow: /joinrequests.php
    Disallow: /login.php
    Disallow: /moderator.php
    Disallow: /newattachment.php
    Disallow: /newreply.php
    Disallow: /newthread.php
    Disallow: /online.php
    Disallow: /poll.php
    Disallow: /postings.php
    Disallow: /printthread.php
    Disallow: /private.php
    Disallow: /profile.php
    Disallow: /register.php
    Disallow: /report.php
    Disallow: /reputation.php
    Disallow: /search.php
    Disallow: /sendmessage.php
    Disallow: /showgroups.php
    Disallow: /subscription.php
    Disallow: /threadrate.php
    Disallow: /usercp.php
    Disallow: /usernote.php
    Disallow: /member.php
    Disallow: /vaispy.php
    Disallow: /showpost.php
    Disallow: /misc.php
    mesela frmtr.com'da böyle kullanmış. bu daha mı faydalı? veya başka varmı iyi yararlı birşey.

    User-agent: *
    Allow: /
    
    User-agent: *
    Disallow: /?ref=
    
    User-agent: BoardReader
    Disallow: /
    
    User-agent: Yandex
    Disallow: /
    
    user-agent: AhrefsBot
    disallow: /

    Bana yardımcı olabilecek varmı nasıl yapayım?
  • 23-08-2014, 21:37:59
    #2
    User-agent: Mediapartners-Google
    Disallow:
    User-agent: *
    Disallow: /wp-admin/
    Disallow: /wp-includes/
    Disallow: /?ref=
    Disallow: ?ref=
    Disallow: /page/
    Disallow: ?refsite=
    Disallow: *?refsite=www.n1ads.com&ref=alexa-traffic-rank
    Disallow: sitem.com/search/***
    Disallow: sitem.com/search/****
    Disallow: /search/
    Disallow: /?s=
    Disallow: /?attachment_id=
    Disallow: *?replytocom
    Disallow: */trackback/


    Bende bu şekilde kullanıyorum. Şu anlık bir sıkıntı oluşmadı
  • 24-08-2014, 01:19:25
    #3
    Üyeliği durduruldu
    Robots.txt siteye göre değişir kullanımı.
  • 24-08-2014, 01:21:37
    #4
    User-agent: *
    Disallow: /wp-admin/
    Disallow: /wp-includes/

    Sitemap: http://sitecom/sitemap.xml
  • 24-08-2014, 07:28:33
    #5
    Arkadaşlar sistemim vBulletin.
  • 24-08-2014, 07:57:25
    #6
    Josephine adlı üyeden alıntı: mesajı görüntüle
    Arkadaşlar sistemim vBulletin.

    User-agent: * 
    Allow: /admincp/
    Allow: /includes/
    Allow: /modcp/
    Allow: /customavatars/
    Allow: /images/
    Allow: /clientscript/
    Allow: /ajax.php
    Allow: /attachment.php
    Allow: /calendar.php
    Allow: /cron.php
    Allow: /editpost.php
    Allow: /global.php
    Allow: /image.php
    Allow: /inlinemod.php
    Allow: /joinrequests.php
    Allow: /login.php
    Allow: /moderator.php
    Allow: /newattachment.php
    Allow: /newreply.php
    Allow: /newthread.php
    Allow: /online.php
    Allow: /poll.php
    Allow: /postings.php
    Allow: /printthread.php
    Allow: /private.php
    Allow: /profile.php
    Allow: /register.php
    Allow: /report.php
    Allow: /reputation.php
    Allow: /search.php
    Allow: /sendmessage.php
    Allow: /showgroups.php
    Allow: /subscription.php
    Allow: /threadrate.php
    Allow: /usercp.php
    Allow: /usernote.php
    Allow: /member.php
    Allow: /vaispy.php
    Allow: /showpost.php
    Allow: /misc.php

    Bunu metin bel. kaydet filezilladan ana dizine ve ya robots.txt hangi klasörde ise onunla değiştir...

    --R10.NET; Flood Engellendi -->-> Yeni yazılan mesaj 07:57:25 -->-> Daha önceki mesaj 07:55:57 --

    SakaryaCity adlı üyeden alıntı: mesajı görüntüle
    User-agent: Mediapartners-Google
    Disallow:
    User-agent: *
    Disallow: /wp-admin/
    Disallow: /wp-includes/
    Disallow: /?ref=
    Disallow: ?ref=
    Disallow: /page/
    Disallow: ?refsite=
    Disallow: *?refsite=www.n1ads.com&ref=alexa-traffic-rank
    Disallow: sitem.com/search/***
    Disallow: sitem.com/search/****
    Disallow: /search/
    Disallow: /?s=
    Disallow: /?attachment_id=
    Disallow: *?replytocom
    Disallow: */trackback/


    Bende bu şekilde kullanıyorum. Şu anlık bir sıkıntı oluşmadı
    sıkıntıyı göremezsin ki

    düzeltmen lazım...

    disallow yazanları

    Allow diye değiş... ftpden...