Kullandığım robot.txt şu:
User-agent: *
User-agent: Mediapartners-Google
Disallow: /search
Allow: /
Sitemap: https://siteadi.com




Anladım. robot.txt dosyası kullanmadan önce sitenin hit sayısı çok düşük ve sayfaları çok atlarda görünüyordu. Şu an düzeldi o yüzden silmekten çekiniyorum.