robots.txt dosyama aşağıdaki kodu eklemiştim ancak hala botları siteme girip indexleyebiliyor başka nasıl engelleyebilirim bunları
User-agent: ia_archiver Disallow: /
User-agent: archive.org_bot Disallow: /
User-agent: ia_archiver-web.archive.org Disallow: /
Cloudflare'de firewall kısmına gel hocam, yeni kural aç ve useragent contains parametresiyle bu useragentleri ekleyip deploy et hocam.