Bot ile İçerik Girmek - Sayfa 2

20-06-2013, 12:22:31

#10

oguzzarslan

MeyT adlı üyeden alıntı: mesajı görüntüle

Bu dediğiniz olayı Robots.txt ile halledebilirsiniz hocam?
Googlebot'a istediğiniz sayfaları komut vererek indexlemesini engelleyebiliyorsunuz.
Google'dan aratın, bulursunuz kodları.

robot.txt dosyalarını sadece botlar değil insanlar da okuyabilir dolayısıyla robot.txt'te yer alan bir bot urlsi güvenli bir şekilde gizlenmiş olmaz, üst mesajlarda bir arkadaş zaten bunu ifade etmiş. Login sistemi şart
21-06-2013, 17:48:59

#11

Archetype

botun dosyalarının metalarına noindex, nofollow eklerseniz sorun çözülür gibime geliyor