Evet sanırım. robot txt ye böyle bir not düştüklerine göre ana dizinde botları engelleyen bir şey var kaldırılması için not düşülmüş ama sanırım pek ilgilenmiyorlar
User-agent: *
Allow: /
Robots.txt izin vermişler hocam,
Allow: /
veya
Disallow:
izin verildi demek, yeni mi değiştirdiler acaba?
Siz baktığınızda
Allow:
veya
Disallow: /
şeklinde miydi? merak ettim..