http://www.acemiblogcu.com/robotstxt...-ne-ise-yarar/
buraya bakarak tekrar yaptım fakat Allow -Disallow kafamı karıştırdıı :S!!!
Allow olması gerektiğinden eminmisin?