robots.txt yok :'(

Question

Arkadaşlar www.siteadi.com/robots.txt yazdığımda birşey açılmıyor. yani sanıyorum sitemde robots.txt yok acaba bu benim için büyük bir sorunmu? nasıl bir yol izlemeliyim yardımcı olabilecek var mı? elim ayağım birbirine dolandı şuan :S

LG700 · Answer

admin paneli engellemek istiyosan yukardaki örnek'te verilen gibi disallow olan satırın  devamına admin yolunu yazarak ekleyebilirsin

User-agent: *
Disallow: /admin.php

gibi yada admin url ne ise onu yazarak uygulayabilirsin

LG700 · Answer

Retreat adlı üyeden alıntı:						mesajı görüntüle									Title'si Ara olan bir sürü sayfam indexli ondan sonra sen çöpsün deyip sandbox'a atmasın?

--R10.NET; Flood Engellendi -->-> Yeni yazılan mesaj 14:08:46 -->-> Daha önceki mesaj 14:08:13 --



Teşekkür ederim ancak robots.txt dosyasına bu şekilde yazılabiliyor mu? 		User-agent: *
Disallow: /search.php?a=*

bu şekilde ekleyeceksin

Retreat · Answer

propertyandturk adlı üyeden alıntı:						mesajı görüntüle									olmasinin bir zarari yok ve google tavsiye ediiyior, yani google abimiz yap diyorsa yapacaksin 		Title'si Ara olan bir sürü sayfam indexli ondan sonra sen çöpsün deyip sandbox'a atmasın?

--R10.NET; Flood Engellendi -->-> Yeni yazılan mesaj 14:08:46 -->-> Daha önceki mesaj 14:08:13 --

LG700 adlı üyeden alıntı:						mesajı görüntüle									www.siteninadiadi.com/search.php?a=*

yukardaki gibi kullanırsan yeterli olur. bu şekilde hiç bir etiket indexlenmez 		Teşekkür ederim ancak robots.txt dosyasına bu şekilde yazılabiliyor mu?

CoRcH · Answer

bayGaReZ adlı üyeden alıntı:						mesajı görüntüle									Site wordpress ise şunu yazıp atın FTP ye

User-agent: *
Disallow: /wp-admin/
Disallow: /wp-includes/
Sitemap: http://www.sitemap-adresi.comNot: index sürenizin bununla bir ilgisi yoktur. 		Ben bunu yazmama ragmen site:siteadi.com yazdigimda wp-admin index'im cıkıyor. bu sorunu nasıl düzeltebilirim :S

LG700 · Answer

Retreat adlı üyeden alıntı:						mesajı görüntüle									Arkadaşlar şimdi baktımda robots.txtde /search.php'yi engelledim 

ancak url yapısı şöyle oluyor 

www.siteninadiadi.com/search.php?a=keywordler

acaba bunun indexlenmemesi için sadece /search.php'yi engellemek yetermi?

şimdiden ilgilenen herkese teşekkürler. 		www.siteninadiadi.com/search.php?a=*

yukardaki gibi kullanırsan yeterli olur. bu şekilde hiç bir etiket indexlenmez

propertyandturk · Answer

olmasinin bir zarari yok ve google tavsiye ediiyior, yani google abimiz yap diyorsa yapacaksin

Retreat · Answer

Arkadaşlar şimdi baktımda robots.txtde /search.php'yi engelledim 

ancak url yapısı şöyle oluyor 

www.siteninadiadi.com/search.php?a=keywordler

acaba bunun indexlenmemesi için sadece /search.php'yi engellemek yetermi?

şimdiden ilgilenen herkese teşekkürler.

LG700 · Answer

google bot senin admin panel yolunu bilmez ona burada da bir sayfam var diyip o sayfaya link verirsen indexler ancak

Retreat · Answer

LG700 adlı üyeden alıntı:						mesajı görüntüle									admin paneli engellemek istiyosan yukardaki örnek'te verilen gibi disallow olan satırın  devamına admin yolunu yazarak ekleyebilirsin

User-agent: *
Disallow: /admin.php

gibi yada admin url ne ise onu yazarak uygulayabilirsin 		teşekkür ederim ancak şuan admin paneli indexlenmiyor zaten yani robots.txt olmadan nası olmuş ki bu?

Retreat · Answer

LG700 adlı üyeden alıntı: mesajı görüntüle

yoksa ekle

Nasıl yapmam gerektiğini bilmediğim için korkuyorum. İçerisine yanlış birşey eklerim falan diye

site 1 haftada index alıyor bununla ilgisi olabilir mi acaba

LG700 · Answer

Belirli bir sayfayı engellemek istemiyorsan eklemenin pek bir anlamı yok

Retreat · Answer

bayGaReZ adlı üyeden alıntı:						mesajı görüntüle									Site wordpress ise şunu yazıp atın FTP ye

User-agent: *
Disallow: /wp-admin/
Disallow: /wp-includes/
Sitemap: http://www.sitemap-adresi.comNot: index sürenizin bununla bir ilgisi yoktur. 		Wordpress değil teşekkür ederim.

fatihemre · Answer

Site wordpress ise şunu yazıp atın FTP ye

User-agent: *
Disallow: /wp-admin/
Disallow: /wp-includes/
Sitemap: http://www.sitemap-adresi.comNot: index sürenizin bununla bir ilgisi yoktur.

Retreat · Answer

LG700 adlı üyeden alıntı:						mesajı görüntüle									yoksa ekle  		Nasıl yapmam gerektiğini bilmediğim için korkuyorum. İçerisine yanlış birşey eklerim falan diye 

site 1 haftada index alıyor bununla ilgisi olabilir mi acaba

LG700 · Answer

yoksa ekle

aliyilmaz · Answer

Alıntı										robots.txt dosyası web'i tarayan arama motoru robotlarının sitenize erişimini kısıtlar. Bu botlar otomatiktir ve bir sitenin sayfalarına erişmeden önce, belirli sayfalara erişmelerini önleyen bir robots.txt dosyası olup olmadığını kontrol ederler. (Saygın robotların tümü bir robots.txt dosyasındaki yönergeleri gözetse de bazı robotlar yönergeleri farklı yorumlayabilir. Ancak, bir robots.txt dosyası dayatılamaz ve bazı spam göndericilerle diğer kötü amaçlı kişiler bu dosyayı göz ardı edebilir. Bu nedenle, gizli bilgileri şifreyle korumayı öneriyoruz.)
http://support.google.com/webmasters...&answer=156449 		Olmaması daha iyi.