Robots.txt mantığı izin verme ve yasaklama?

Disallow: / google dizine eklenmeyecek sayfa
Allow: / google dizine eklenecek sayfa

robots.txt mantığı bu sekılde calısıyor değilmi ?

Evet hocam o şekilde fakat yasaklamak istediğiniz klasöre index.php oluşturun ve için şu kodları ekleyin;

<meta name="robots" content="noindex,nofollow">

Günceldir.

Dizine eklenip eklenmemesi için bu şekilde 👍