robots.txt dosyana şu şekilde ekleme yapmalısın
User-agent: * 
Disallow: /calendar/ 
Disallow: /junk/ 
Disallow: /books/fiction/contemporary/