robot.txt ile nerelere gırıp nerlere gıremeyecegını belirlesin botları.Tabikı bunu yapman mumkun atıyorum sitem.com/x kısmına gırmesın sitem.com/z kısmına gırsın gıbı...