Demek istediğiniz tam anlamadım fakat sitenizi localhostunuzda yapın tamamladığınız zaman herhangi bir dosya transferi programı ile (ftp) sunucunuza atın. Eğer sunucu üzerinden çalışıyorsanız sitenize ait tüm dosyaları bir test adında klasör oluşturup içine atın ve masaüstünüzde robots.txt dosyası oluşturup için aşağıdaki kodları yazın ve kaydettikten sonra bu dosyayı sunucu ana dizine atın :

User-agent: *
Disallow: /test