robots.txt ile alan adına göre siteyi disallow yapmak

22-05-2013, 17:47:15

Merhabalar,
şöyle bir durum var, 1 siteye aşağıdaki gibi 2 ayrı domainden erişilebiliyor, her iki isim aynı web dizinine gidiyor yani.

alanadi.com/~deneme
deneme.com

google'un alanadi.com/~deneme adresini indexlememesini nasıl sağlarım? direkt robots.txt'ye disallow * yaparsam olmaz çünkü aynı robots.txt'yi asıl alan adı da kullanıyor.

22-05-2013, 17:52:30

#2

okngny

Kimlik doğrulama veya yönetimden onay bekliyor.

.htaccess ile yönlendirme yapabilirsiniz.

RewriteCond %{HTTP_HOST} ^deneme1.com$ [OR]
RewriteCond %{HTTP_HOST} ^www.deneme1.com$
RewriteRule ^(.*)$ "http://www.deneme.com/$1" [R=301,L]

eğer doğru anladıysam

22-05-2013, 18:03:50

#3

constantine

okngny adlı üyeden alıntı: mesajı görüntüle

.htaccess ile yönlendirme yapabilirsiniz.

RewriteCond %{HTTP_HOST} ^deneme1.com$ [OR]
RewriteCond %{HTTP_HOST} ^www.deneme1.com$
RewriteRule ^(.*)$ "http://www.deneme.com/$1" [R=301,L]

eğer doğru anladıysam

yok hocam, yönlendirme işimi çözmez. ilk verdiğim adres sunucudan geçici erişim için, yani yönlendirme yapmak pek uygun olmaz.

22-05-2013, 18:31:41

#4

oksijenterapi

#
# robots.txt
#
User-agent: Googlebot
Disallow: /
#
User-agent: *
Disallow: /
#

kullanmadığın domaini yönlendir, yönlendirdiğin domaini robots.txt dosyasına üstteki kodu yaz

yada

User-agent: *
Disallow: ~deneme

klasöre izin verme