Hocam sonuç olarak robots.txt yi şöylemi yapayım ??
siz anlıyorsunuz bu işten belli çok sağolun son böyle yapıyorum ve direk public.html nin içine atıyorum doğrumudur?
sitemap olanıda ekle altına şuan ki olana verdiğim satırı ekledinmi tamamdır
User-agent: *
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /*.html/*
Sitemap: http://www.bendenfilmizle.com/sitemap.xml.gz