disallow ile işaretlediğiniz kısımlar indexlenmesin istiyorsanız doğru.
AhrefsBot her yeri tarayabilir,