Bu test aracıyla robots.txt dosyanızı test edin ve doğrulayın. Bir URL'nin engellenip engellenmediğini, hangi ifadenin onu engellediğini ve hangi kullanıcı aracısı için kontrol edin. Sayfa kaynaklarına (CSS, JavaScript, resimler) izin verilip verilmediğini de kontrol edebilirsiniz
https://technicalseo.com/tools/robots-txt/