https://gist.github.com/cyberwani/bd...b29767f9c40192
Bazı botların sitenizi çekmesini engelleyebilirsiniz ama seo'ya zararı %100