SelmanD": web spider list, arama motoru crawler listesi, web spider names

Buraya örnek robots.txt yi koydum ve tüm crawler ların isimleri vs de var google botlar engellenmemisdir iyi günler.