yok arkadaşlar hiç bir engelleme yapmıyor anlamadım gitti bana .htaccess ile engelleme kaldı .htaccess dosyası ile engellemeyi bilen varsa yazarsa sevinirim
dakikasında engelleme olmaz robots.txt dosyası ile. Bot sitene bir sonraki gelişinde indexleme yapmadan önce robots.txt i okur. İçindeki yasaklı sayfaları indexe almaz. Daha önce indexlenen sayfalar da bi rkaç hafta içinde indexten düşer.
Kodu koyup 2 gün sonra olmuyor deme. Siten en son ne zaman cachlenmiş bak bakalım.