konuyu açan arkadaşım robots txt yi

User-agent: *
Disallow: /*ref*
bu şekilde yaparsan örneğin firefox ile ilgili konuların varsa engellenmiş olur. yani linklerin içinde ref geçen herşey engelenir.

Şöyle yapmanız lazım

User-agent: *
Disallow: /*ref=*