Ya millet kaç yerde okudum gel gör ki şu robot.txt olayını anlamadım. Bazılarının "neyi anladın ki" dediğini duyar gibiyim

Bir kaç sorum var cevaplarsanız sevinirim:::

1- robot.txt sayfası html, php ve asp için gerekli mi? Ya da hepsinde kullanılabilir mi?

2- Bu dosyanın içine ne yazmak gerekiyor?

3- Örnek bi robot.txt dosyasıı nereden bulabilirim?

"Ara bul" diycek olan varsa hiç cvp yazmasın kafamı bozmasın. Çizerim haaaa