robot txt dosyası nasıl oluşturulur ?

ve siteye nasıl eklenir

Normalde elle txt dosyasına yazıp FTP ile hostingine atman yeterli ama yardımcı olan siteler var.

https://www.seoptimer.com/robots-txt-generator buraya girip, izin vermek istediğin arama motorlarına allowed deyip oluştur.Oluşan txt dosyasını hostine at.

https://www.seohocasi.com/robots-txt-generator/ Buradan sizin için önemli veya önemsiz gördüğünüz dizinlerin ayarlamasını yapabilirsiniz.
oluşturduğunuz komutları robots.txt dosyasına ekleyip dizine atacaksınız. Hepsi bu kadar