robot.txt ile google botlarının girmesini istemediğiniz linklerınızı belirleyebilirsiniz. bu işlemi webmaster tolls araçlarındanda yapabılırsınız.