• 10-02-2008, 02:13:44
    #10
    Üyeliği durduruldu
    Haymac adlı üyeden alıntı: mesajı görüntüle
    Botlar (crawler) robot.txt favicon ve 404 sayfalarına istekte buluyorlar genelde.
    birde ayrıca,
    selim61 efendi burası iyinet değil, artislenip durma.
    Evet gelen isteklerdeki ip ler %90 crawler, fakat makineyi çok fazla kasıyor.
    2 gündür uykusuzca bu konuyu yabancı forumlarda araştırıyorum çünkü tutulan loglar küçümsenecek boyutta değil.
    Nerden çıktı permission yada rewrite:
    Open-realty - VizaWeb.com
    The Planet Forums > httpd.conf custom error pages dont work
    Internel Server Error - HostNine Community Forums
    iki gün sonunda birisinin çıkıpta favicon.ico ekle dizine demesi beni çıldırttı monitöre kafa atacak kadar kızdım.
    Bu iş tecrübe işidir, ilk mesajımda konu hakkında tecrübeli ve bilgili dedim.Bak sen gelen isteklerin crawler olduğunu bildin, daha önce benzer sorunla karşılaşmışsın.

    Beni az tanısan artislenme kelimesi bana ters ,yapıma ters.Farklı bi kelime bulalım...
  • 11-02-2008, 00:37:14
    #11
    artislenme mevzusuna sonra bakarız,

    şimdi bu olay error loglarda meydana geldiğine göre, error logların belli seviyeleri var LogLevel ile belirlenen, yükselirsen httpd.conf dan error seviyesini logların tutulmaması olabilir,

    yada robot.txt atarsın bi tane boş çünkü google bile bakıyor artık bu dosyaya yani ,
    404 ve favicon içinde bir adet rewrite kuralı ile disneylanda yollarsın isteği olur biter