Evet sanırım. robot txt ye böyle bir not düştüklerine göre ana dizinde botları engelleyen bir şey var kaldırılması için not düşülmüş ama sanırım pek ilgilenmiyorlar