Robots.txt dosyası hatalı yapılandırılmış.
Sunucu tarafında Ahrefs botlarını engelleyen bir güvenlik duvarı mevcut mu?