Benim robot.txt bulunamadi diyor. Webmastertoolsa baktigimda. 20 gundurde search anlizimde anahtarlarim siralamada gorunsede arattigimda bulamiyorum. Hitte 0. Robot text ne olmali metin varmi index ve dogru calismasi icin?
burada vermişler hazır sistemler için örnekler inceleyin ve diğer kaynaklarada bakın.
https://www.seohocasi.com/hazir-sistemler-icin-en-iyi-robots-txt-dosyalari/