peki robot.txt ile kısıtlarsam bu sefer normal bir şekilde indexlermi çünki indexleri sadece etiketlerden yapıyo bu seferde hiç index yapmazsa?