eminim hocam. aynen bu şekilde kullanabiliyorsunuz.
http://www.searchenginepromotionhelp...ts-checker.php
bu sayfa gidip, şu basitçe kodu check edin isterseniz,
Alıntı
User-agent: *
Disallow: /*.htm
onaylanmıyor, wilcard karakterler.
fakat
https://www.google.com.tr/robots.txt burada google kendi robot dosyasında wilcard karakterleri kullanıyor.