Merhaba,
Aşağıdaki kodlar daha uygundur. " Sitemap " yazısını istersen kaldırabilirsin, ayrıca google'dan analiz ettim, ve herhangi engelleme veya hata yoktur.
Alıntı
# robots.txt for http://www.site.com/
User-agent: *
Disallow: /*ref=*
Disallow: /*?ref=
Sitemap: http://www.site.com/sitemap.xml.gz