Yahoo Botları...

yahoo kendine güvenmiyor arkadaşları ile geliyor google tek gelir işimi hallederim diyor

su google bırgunde bize ugrasa

Uğrar dostum uğrar sıkma canını yeterki googleyi ateşle gel len siteme de
yani güncel tut

bu yahooya bi çzöüm bulmak lazım çok yer kaplıyolar ziyateçi sayım çok gözüküyo onlar sayesinde

yaw ne zmandır buna aklım takılıyordu. hiç robot txt kullanmadığım için çözümü bulamıyordum. şimdi sanırım buldum.

bu kodu robot.txt ye yazıyoruz. böylece bu bot bu klasörlere giremio. sanırım böyle bir şey daha robot.txt yi pek fazla incelemedim ama yanlış olmaması lzm.

yahoo googlea yetişmek için bu tür şeyler yapıyor olabilir. o kadar fazla botla daha fazla index çıkartmaya çalışabilir bu yahoo nun işi bizi alakadar etmez. ne kadar yararı olmasada bence hiçbir botu vs engellemeyin. gelen gitmesinide bilir.

millet bot gelecek indexlenmiyorum diye dert yanar sen geliyolar diye dert yanıyosun

istiyosan engelleyebilirsin arkadaş vermiş kodu.

valla sıkıldım bu botlardan