Kod:
Disallow: /forums/search.php
Bunu eklemenizi uygun bulmuyorum.
Sebebine gelince; özellikle forum dışı kelimlere link verirken örneğin bir etikete link verirken ;
HTML-Kodu:
http://www.siteadı.com/forum/search.php?do=process&q=kelime adı
vermeniz bir taşla iki kuş vurmanıza yardımcı olacaktır.
Örneğin-->
Demo linkinden de inceleyebileceğiniz gibi kelimeler forum içi aramalara bağlandı. Site açılalı 18 gün olmasına rağmen linkler indexlenmesiyle forum içi arama sonuçları da indexlenmeye başlandı.
Bu kodu robot.txt içerisine eklememenizi tavsiye ederim.