tam adresini http://www.site.com/xxxxxx.html olarak
robot.txt ye disallow kaydet yaparsın