• 16-03-2009, 14:07:24
    #1
    Üyeliği durduruldu
    sadece google crawler olsun diğerleri olmasın istiorum. bıktım artık eften püfden botların bant yemesinden. )


    Tesekkurler
  • 16-03-2009, 14:19:04
    #2
    Üyeliği durduruldu
    esintiinfo adlı üyeden alıntı: mesajı görüntüle
    sadece google crawler olsun diğerleri olmasın istiorum. bıktım artık eften püfden botların bant yemesinden. )
    Tesekkurler
    ben şahsen tavsiye etmem. google farklı isimlerle geldiginde farklı içerikler bulup üç kagitçi site olarak nitelendirip sandbox yiyebilirsiniz
  • 16-03-2009, 14:56:02
    #3
    robots.txt kullan
  • 16-03-2009, 15:04:22
    #4
    Kimlik doğrulama veya yönetimden onay bekliyor.
    SelmanD": web spider list, arama motoru crawler listesi, web spider names

    Buraya örnek robots.txt yi koydum ve tüm crawler ların isimleri vs de var google botlar engellenmemisdir iyi günler.
  • 16-03-2009, 15:28:16
    #5
    bir günde google bot sitemden 650 mb veri çekmiş
  • 16-03-2009, 15:49:30
    #6
    Üyeliği durduruldu
    selmand adlı üyeden alıntı: mesajı görüntüle
    bir günde google bot sitemden 650 mb veri çekmiş
    google in cani sagolsun
  • 16-03-2009, 19:25:27
    #7
    Üyeliği durduruldu
    selmand adlı üyeden alıntı: mesajı görüntüle
    bir günde google bot sitemden 650 mb veri çekmiş
    senin sunucu su kaynatmış desene
  • 17-03-2009, 15:26:30
    #8
    Rengahenk adlı üyeden alıntı: mesajı görüntüle
    senin sunucu su kaynatmış desene
    Sorma yaf Allahdan kapanmamıs o kadar cpu yemis . vicdansız google ne olcek bende bi flood kontrolü koydum at koşturamıycak artık sistemde bi kaç google bot birden girmis o gün total veri 4,5 gb yi bulmus nerdeyse google ın çektiği. abartmıs yani biraz

    Neyse sorun halloldu sanırım. Bu arada bi kaç kişide ddos yapmış onlarıda gördüm. İyi bi ddos kontrolü koydum bakalım bundan sonra bu kadar yemez umarım