arkadaşlar robot txt nereye atılıyor

Question

htaccess mi public html mi neydi unuttum.
bu ara da doğru mu

ismailix · Answer

html dosyalarının bulunduğu klasöre atacaksın. küçücük resimden anladığım sayfayı takip etmesini istememişsin.
eğer o şekilde ayarlamak istersen doğru

Emirkirax · Answer

ismailix adlı üyeden alıntı:						mesajı görüntüle									html dosyalarının bulunduğu klasöre atacaksın. küçücük resimden anladığım sayfayı takip etmesini istememişsin.
eğer o şekilde ayarlamak istersen doğru 		ne öneririsin hocam peki allow mu yapayım sence hepsini.

Gain · Answer

Emirkirax adlı üyeden alıntı:						mesajı görüntüle									htaccess mi public html mi neydi unuttum.
bu ara da doğru mu
 		public_html atacaksın, bu arada yanlış en son eklediğin

user-agent: *
Disallow:

tüm botları engeller.

doğru örnek
User-agent: *
Allow: /

Sitemap:xxx/sitemap.xml

User-agent: 01h4x.com
Disallow:/
User-agent: 360Spider 
Disallow:/
User-agent: 404checker
Disallow:/
User-agent: 404enemy
Disallow:/
User-agent: 80legs
Disallow:/

Emirkirax · Answer

Gain adlı üyeden alıntı:						mesajı görüntüle									public_html atacaksın, bu arada yanlış en son eklediğin

user-agent: *
Disallow:

tüm botları engeller.

doğru örnek
User-agent: *
Allow: /

Sitemap:xxx/sitemap.xml

User-agent: 01h4x.com
Disallow:/
User-agent: 360Spider 
Disallow:/
User-agent: 404checker
Disallow:/
User-agent: 404enemy
Disallow:/
User-agent: 80legs
Disallow:/ 		hocam sadece user agenti değiştirip allow mu yapacağım

Gain · Answer

Emirkirax adlı üyeden alıntı:						mesajı görüntüle									hocam sadece user agenti değiştirip allow mu yapacağım 		evet

Emirkirax · Answer

Gain adlı üyeden alıntı:						mesajı görüntüle									public_html atacaksın, bu arada yanlış en son eklediğin

user-agent: *
Disallow:

tüm botları engeller.

doğru örnek
User-agent: *
Allow: /

Sitemap:xxx/sitemap.xml

User-agent: 01h4x.com
Disallow:/
User-agent: 360Spider 
Disallow:/
User-agent: 404checker
Disallow:/
User-agent: 404enemy
Disallow:/
User-agent: 80legs
Disallow:/ 		index.html yazıyor bende onu sileyim mi ve :/ eklenmemiş bende

Gain · Answer

Emirkirax adlı üyeden alıntı:						mesajı görüntüle									index.html yazıyor bende onu sileyim mi ve :/ eklenmemiş bende 		index nerde yazıyor ben göremedim

shijie · Answer

Gain adlı üyeden alıntı:						mesajı görüntüle									index nerde yazıyor ben göremedim 		sitemap linkini diyor senin örneğinde farklı ya kafası karışmış.

link neyse onu yaz hocam karşılığı yoksa sonuç alamazsın

Emirkirax · Answer

Libertia adlı üyeden alıntı:						mesajı görüntüle									sitemap linkini diyor senin örneğinde farklı ya kafası karışmış.

link neyse onu yaz hocam karşılığı yoksa sonuç alamazsın 		hocam domain/robots.txt yazınca çıkıyor sorun yoktur sanırsam değil mi.

shijie · Answer

evet sorun yok.