robot.txt dosyası oluştur ve içine istemediğin linkleri yazıp indexlenmesini engelleyebilirsin.