@Derbederim68, hocam robots.txt dosyası olmadan olmaz. Bu büyük bir hatadır acilen halletmelisiniz. Örnek bir robots.txt;
https://xenforo.com/robots.txt SADECE ÖRNEKTİR. Sitenin FTP'de ana dizinde olması gerekir böyle.
Her sitede bunun olması şart. En altına da site haritasının linkini ekleyeceksiniz. Robots.txt çok önem teşkil eder. Google botları, sizin robot dosyasında verdiğiniz izinlere göre hareket eder ki, bu da size + olarak geri döner. Ayrıca istemediğiniz linkleri de bu yolla hemen silebilirsiniz.
hocam ben bunu anladım fakat webmaster toolsta domain düştü ben aldığım için eski siteden bulunmayan sayfalar var onları nasıl yapacağımı anlamadım tam olarak
--R10.NET; Flood Engellendi -->-> Yeni yazılan mesaj 18:20:44 -->-> Daha önceki mesaj 18:08:28 --
bu linkler webmaster tools ta hata verenler robot dosyasına bu şekilde yazdığım zaman doğru mu hocam ?
Disallow: /groups/the-best-way-to-restoration-your-water-vessel-crucial-facts-you-might-want-to-understand/
Disallow: /groups/effortless-connecticut-sales-talent-agency-systems-an-intro/
Disallow: /forum/