Bence yeni bir robots.txt yapın ve o şekilde tanıtın. Düzelecektir