Arkadaş adamlar elli bin kez konuda anlatıyor, robots.txt örnekleri veriyolar hala soruyosunuz ya hangilerini ekleyelim diye.