Wordpress İçin Robots.Txt Dosyası

Eğer Alışagelmiş Dışında Robots.txt Kullanmak İstiyorsanız.Aşağıdaki Size Tam Uygun

Disallow: /wp-content/
Disallow: /trackback/
Disallow: /wp-admin/
Disallow: /feed/
Disallow: /archives/
Disallow: /sitemap.xml
Disallow: /index.php
Disallow: /*?
Disallow: /*.php$
Disallow: /*.js$
Disallow: /*.inc$
Disallow: /*.css$
Disallow: */feed/
Disallow: */trackback/
Disallow: /page/
Disallow: /tag/
Disallow: /category/

Disallow: /sitemap.xml
Disallow: /index.php

bu iki satırı anlamadım sadece
neden sitemap ve index.php engelliyoruz?

bende kategoriyide dahil edip soracaktım

Kategori sayfalarını indexlemese de olur, çünkü yazıları zaten indexliyor. Ancak sitemapi engellersek direk bir gözünü kör ederiz google'ın mazallah

Vermiş olduğun kodlar alışılagelmişi değiştirmek değil Google ile aranı bozmak demek

Tavsiye etmem bu kodlari

kullandıgı kodları paylaşacak olan varmı

bu dosyayı kullanmanıza gerek yok. sadece engellemek istediğiniz dizinler için kullanın eğer özel olarak bir klasörünüz yazınız vs varsa. ref saldırıları için kullanın mesela, diğer türlü boş yere google ile aranızı bozmayın.

Benim emektar robots.txt dosyam;