Sunucudaki bütün botları takip ederken farkettim ki Googlebotları random sayfa kullanıp 404 sonucunu arıyor. Daha önceden olmayan sayfalarım 404 yerine 200 response veriyordu. Sizde olmayan sayfalarınıza mutlaka 404 http cevabı gönderin.
Alıntı
66.249.65.179 - - [27/Mar/2015:22:56:02 +0200] "GET /ijzftorazfgspp.html HTTP/1.1" 404 5295 "-" "Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)"
404 için Htaccess kodu
Alıntı
RewriteCond %{REQUEST_FILENAME} !-f
RewriteCond %{REQUEST_FILENAME} !-d
RewriteCond %{REQUEST_FILENAME} !-l
RewriteRule ^ / [L,R=404]
Bunun gibi farkettiğiniz olaylar varsa bu konu altında paylaşırsanız sevinirim. Hem bilmediğimiz ilk defa gördüğümüz olaylara karşı önceden tedbir alalım.