merhaba arkadaşlar

robotx.txt içerisinde kelime nasıl yasakların

örnek mesela forumum var ve robotx.txt ile program kelimesini aramalara yasaklayacağım veya birden fazla kelime daraltarak delphi,basic,c++ bu 3 kelimeyi yasaklamak istiyorum

kelime yanısıra forumda bir katagoriyi yasaklamak ve oraya taşınan tüm konuların ne olursa olsun konu linklerinin yasaklanması aynı konudan 2-3 veya 10 tane forumda olabilir ama bir katagori altındakileri yasaklayıp diğerlerini serbest bırakmak....

örnek verebilecek arkadaşım varmı ??