en basit robot.txt oluşturabilirsin

User-agent: *
Disallow: 
Disallow: siteadi.com/katagoriismi/ornek
Disallow: siteadi.com/katagoriismi2/ornek

google'un indekslememesini istediğin sayfaları örnekteki gibi Disallow: sayfa linki şeklinde ekleyip sitenin ana dizinine atarsan google o sayfaları indeklemeyecektir...