User-Agent: *
Allow: /
olarak değişitirsen butun Botlara ve dizinlere izin vermiş olursun!