Yandex İndex Alma Sorunu

hocam öncelikle herkese merhaba, bu forumda açtığım ilk konu olacak eğer hatam olursa affola.

sorunum şu ki bir tane web sitem için yandex bana mail atıyor "Couldn't load the main page of the site https://www.abcsite.com" şeklinde. detayları da aşağıda.

"Hello,
Upon requesting the main page of site https://www.abcsite.com, the indexing robot was unable to receive a document: «403 Forbidden». The page may be excluded from search results because the indexing robot cannot access it.

Check the server response and contact your hosting provider if necessary.

Go to the site diagnostics checklist to see all the site issues detected by Yandex.
Yours, the Yandex.Webmaster bots"

Yandex üzerinden check ettiğimde ise yine hata alıyorum. Konu hakkında bilgisi olan var mı?

Siteniz hangı Hostıngte barınıyor, yandex sunucuları banlı olabılır

veridyen hocam

Veridyende yandex botları banlı,destekten yazın acsınlar, bende o sekılde yaptım

hocam sorun veridyenmiş

"Merhaba,
Maalesef ki Yandex botları saldırgan bir şekilde çalışıyor bu yüzden sunucularımızda bulunan Modsecurity güvenlik yazılımı tarafından Yandex botları engelleniyor, lakin Yandex botlarının sitenize erişmesini istiyorsanız istediğiniz siteler için açabiliriz.Fakat bu durumda aşırı CPU (işlemci gücü) kullanmanız gibi bir durumda herhangi bir sorumluluk almadığımızı, bu durumun sizin açınızdan risk teşkil ettiğini bilmenizi isterim. Aşırı kaynak kullanımından dolayı hesabınız askıya alınabilir yada tekrar Yandex erişimine kapatılabilir.
Yandex Bot Saldırısı Video:
https://www.youtube.com/watch?v=cz0lGxtUQbU

Yandex firmasının web sitelerine gönderdiği crawler botlarının dofollow/nofollow mantığı olmamasından dolayı videoda gördüğünüz şekilde ard arda link denemeleri yapmakta ve indexine almaya çalışmaktadır. Özellikle iki ziyaret arasındaki sürenin çok kısa olması, 404 sayfalara istek göndermesi nedeniyle sunucu tarafında saldırı olarak algılanır, aşırı işlemci (kaynak) kullanımına, web sitenizin yavaşlamasına sebebiyet verir."

Bu sorun 2017 yılında da varmış şimdide var. Nasıl hala düzeltilmemiş anlamıyorum ya.



Peki bir sorun oluyor mu ilerleyen zamanlarda? Bir arkadaş fazla CPU kullanımı olabilir demiş. Bir diğeri de aldığınız hosting aşırı kullanımdan kapatılabilir veya yandex tekrar çalışmayabilir demiş.