Disallow: /bot ismi

Sanırım Böyle olması gerek tam olarak bot adını yazarsınız.

Disallow: /baidu

Robots txt dosyanıza sitenize gelen botun adını bot ismi yerine yazın.