Arama motorlarının botlarını engelleme nasıl yapılır ?

08-04-2008, 14:48:25

Üyeliği durduruldu

google, yahoo, msn, altavista haricindeki botların siteye ulaşmasını engellemek için ne yapmamız gereklidir ?
İşlevsellik tam olarak şu şekilde kurgulandı; arama motorlarında x sitesinin indexlenmesini önlemek istiyorum.

teşekkürler..

08-04-2008, 15:01:38

#2

webkit

robots.txt uygulamasını kullanarak istediğin arama motorunu sitene sokmazsın.
yahoo'nun arama botu: Slurp

Alıntı

User-agent: Slurp
Disallow: /

Googlenın arama bot Googlebot

Alıntı

User-agent: Googlebot
Disallow: /

gibi, tüm botları engellemek istiyorsan

Alıntı

User-agent: *
Disallow: /

engellemek istediğin botun adını bildikden sonra gerisi sana kalmış

08-04-2008, 15:19:16

#3

~~localphp~~

Üyeliği durduruldu

webkit adlı üyeden alıntı: mesajı görüntüle

robots.txt uygulamasını kullanarak istediğin arama motorunu sitene sokmazsın.
yahoo'nun arama botu: Slurp
Googlenın arama bot Googlebot
gibi, tüm botları engellemek istiyorsan
engellemek istediğin botun adını bildikden sonra gerisi sana kalmış

hürmetler

10-04-2008, 09:12:42

#4

~~CrakMaster~~

Üyeliği durduruldu

peki gelmesini istiyosak

10-04-2008, 09:20:22

#5

webkit

CrakMaster adlı üyeden alıntı: mesajı görüntüle

peki gelmesini istiyosak

farklı sitelerden link alırsın gelir.