GoogleBot neden tuhaf yerleri indexlemeye çalışıyor?

Merhabalar,
Başlıkta belirttiğim gibi GoogleBot neden olur olmaz heryeri indexlemeye çalışıyor.

Mesela /wp-content/ içerisini neden yıldızlı aratıp bulamadım diye liste oluşturmuş anlayamıyorum.

Bir yerde hata mı yapıyorum?

Hoşuna gidiyor fırlamanın

robots.txt ekliceksiniz indexlemesini istemediğiniz yerleri

Birde 404 hatası aldım diye bana bana kızmış. (raporlamış.) uploads klasörü içerisinde gezersen yada wp-content zaten 404 yada 403 alırsın.

Şimdiki Robots.txt bu şekilde:

User-agent: Googlebot
User-agent: bingbot
User-agent: YandexBot
User-agent: DuckDuckBot
User-agent: Slurp
User-agent: Applebot
Allow: /
Allow: /wp-admin/admin-ajax.php
Disallow: /wp-admin/
Disallow: /author/*
Disallow: /page/*
Disallow: /tag/*
Disallow: /?s=*

User-agent: Amazonbot
User-agent: anthropic-ai
User-agent: Applebot-Extended
User-agent: Bytespider
User-agent: CCBot
User-agent: ChatGPT-User
User-agent: ClaudeBot
User-agent: Claude-Web
User-agent: cohere-ai
User-agent: Diffbot
User-agent: FacebookBot
User-agent: Google-Extended
User-agent: GPTBot
User-agent: meta-externalagent
User-agent: omgili
User-agent: omgilibot
User-agent: PerplexityBot
User-agent: Perplexity-User
User-agent: ProRataInc
User-agent: Timpibot
User-agent: Twitterbot
User-agent: ia_archiver
User-agent: AhrefsBot
User-agent: SemrushBot
User-agent: MJ12bot
User-agent: PetalBot
User-agent: DotBot
Disallow: /

Sitemap: https://siteadresi.com/sitemap_index.xml

böyle yapmıştım ama burada uploads/ ve wp-content/ da eklemek gerekli mi?
Ne var ne yok eklememiz mi gerek?
Sitemap'ı neden referans almıyor ki?

Disallow: /wp-content
Disallow: /upload

Bu şekilde ekleyin gozukmesini istemediginizi
Robots.txt i de console a tanimlayin