İpucu: sitelerime ahrefs botu giremiyor neden?

sitelere ahrefs bot giremiyor
Curl ile
Ahrefs bot olarak
Bağlanıp deveyebilirsin

<?php
function cek($url) {
$ch = curl_init();
curl_setopt($ch, CURLOPT_URL, $url);
curl_setopt($ch, CURLOPT_USERAGENT, 'AhrefsBot');
curl_setopt($ch, CURLOPT_RETURNTRANSFER, true);
curl_setopt($ch, CURLOPT_HEADER, true);
curl_setopt($ch, CURLOPT_CONNECTTIMEOUT,5);
curl_setopt($ch, CURLOPT_TIMEOUT,5);
$site = curl_exec($ch);
curl_close($ch);
return $site;
}
$al = 'http://aktuelhaber.xyz/';

echo cek($al);


sitelerime ahrefs botu giremiyor. Konu hakkında bilgisi ve çözüm önerisi olan varsa yardımcı olursa sevinirim.

.htaccess den engellemiş olmayasın yada kodlardan

Ahrefs bot disallow edilmiş sanırım

.httacess ile oynama yaptınızmı?