User-agent: *
Disallow: /*kelime*
bu şekilde eklersen o kelimenin geçtiğin url bağlantılar indexlenmez. daha ayrıntılı istersen hangi kategorinin indexlenmesini istemiyorsan aşağıdaki kodu kendi sitene göre uyarlayabilirsin.
emin misiniz?
* joker karakter sadece User-agent: satırında geçerlidir. Disallow: satırında joker kullanamazsınız.