Büyük bir proje için bir siteden veri çekmem gerekiyor.
Veri yaklaşık 500.00 adet sayfadan ibarettir.
Bu işlem için önce php den normal yolla curl kullanarak bağlandım çektim, 4.000 in saydan sonra ip mi banladı. Sanırım saldırı veya kötü niyetli yazılım olarak algıladı. ( bildi
)Daha sonra proxy ip ile bağlanma olayına gittim, burada netice aldım, fakat bildiğiniz gibi proxy ipler le bağlantılar yavaş oluyor. o anda hızlı olsada bir dakika sonra yavaş, biraz sonra tekrar hızlı, vb. işte.
Benim burada sizlere sormak istediğim bu değişken ipyi paralıda olsa kullanabileceğim bir hizmet oluyormu.
Şu şekilde düşünüyorum. Birçok seomoz, smalt, ahrefs vb birçok site bir domaine bağlandığında bunlar aynı ipden devaml bağlansalar hata alırlar. bunlar bu işi nasıl çözüyorlar.
Diğer bir örnekte bildiğiniz gibi google sıralama sorgusunda google aynı ipden belirli zaman içerisinde yapılan sorguda belirli bir süre sonra kısıtlama getiriyor ve scriptiniz gümlüyor. Burada proxy ip kullanırken devamlı proxy-lis t sitelerine girerek veya botla okutarak çözüm bulmaya çalışıyoruz. Bunun paralı hizmet şekli olmuyormu,
Bilgisi ve tecrübesi olan arkadaşlar bilgi verebilirlerse memnun olurum.
İyi Çalışmalar
