Botum bir türlü cloudfare turnstile ı geçmiyor

Question

bir türlü geçmiyor az kaldı İP Ban yiycem ne yapabilirim

soylenmezsmt · Answer

imranran adlı üyeden alıntı:						mesajı görüntüle									normal basit siteler için evet öyle fakat sahibinden algoritması çok katı ve sert işin çok zor yaparsan bana mesaj at başardığını görüp kutlamak isterim  		Amacımız bir modelde örneğin bmw x model olarak seçip bu x model ile alakalı 100 ilanın verisi çekmek midr hocam? 1 saat filan deneyeyim.

osal · Answer

Sonucu merak ettim &#128578;

soylenmezsmt · Answer

imranran adlı üyeden alıntı:						mesajı görüntüle									Evet olay detayda hocam karşılaştırmayı sonuçta boya ve değişen vs bunlara göre yapıcaksınız 		Hocam proxy konusunda hak veriyorum gerçekten proxysiz yapabildiyseniz güzel.
https://streamable.com/fhvsn3
Şöyle aslında olay basit her cookie için sanırım dakikalık bir limit var veya 5 dakikalık da olabilir 40 dakika içerisinde pek analiz yapamadım.
Lakin aynı ipden olsa bile tekrardan tekrardan olacak şekilde cookie oluşturursanız gene de istekleri kabul ediyor. Cookieyi proxysiz üretip,detay isteklerini proxy ile atabilirsiniz Türk proxy ile.

Konu sahibi hocam sizlerinde kullandığınız kütüphane playwright veya basit selenium ise bunu daha profosyonel kütüphanelerle yaparsanız sorun çözülür.
Aslında aman aman bir koruma yok gibi bence,yani 30 dakikada basit olarak çalışmasını sağlayabildim tabii proxysiz bir yere kadar ilerliyorum. Ama genel olarak 100 mb proxy ile 1k sanırım çekilebilir.

imranran · Answer

soylenmezsmt adlı üyeden alıntı:						mesajı görüntüle									Hocam bu şekilde mi? Yoksa her arabanın detaylarını da mı çekmesi gerekiyor?
https://streamable.com/awxdwj 		Evet olay detayda hocam karşılaştırmayı sonuçta boya ve değişen vs bunlara göre yapıcaksınız

soylenmezsmt · Answer

imranran adlı üyeden alıntı:						mesajı görüntüle									100 ilan çekersin belki fakat 1000 2000 biraz deneyim ve tecrübe istiyor ama genelde normalinde 27 de felan seni bot olarak yakalyıor bile 		Hocam bu şekilde mi? Yoksa her arabanın detaylarını da mı çekmesi gerekiyor?
https://streamable.com/awxdwj

soylenmezsmt · Answer

SelimDev adlı üyeden alıntı:						mesajı görüntüle									Hocam deneyebilirseniz emlak için şehir ilçe mahalle fiyat aralığı oda sayısı olarak düzenli olarak güncel veri çekebilirsiniz 		Hocam şuanda deniyorum bakalım 1 saat içinde yapabilirsem konu açıp etiket atarım yapamazsam da bu yorumu düzenleyeceğim.

SelimDev · Answer

Hocam apify kullanayım dedim apify console açılmıyor

SelimDev · Answer

Hocam deneyebilirseniz emlak için şehir ilçe mahalle fiyat aralığı oda sayısı olarak düzenli olarak güncel veri çekebilirsiniz

imranran · Answer

soylenmezsmt adlı üyeden alıntı:						mesajı görüntüle									Amacımız bir modelde örneğin bmw x model olarak seçip bu x model ile alakalı 100 ilanın verisi çekmek midr hocam? 1 saat filan deneyeyim. 		100 ilan çekersin belki fakat 1000 2000 biraz deneyim ve tecrübe istiyor ama genelde normalinde 27 de felan seni bot olarak yakalyıor bile

imranran · Answer

soylenmezsmt adlı üyeden alıntı:						mesajı görüntüle									Hocam sahibinden ile ilgilenmiyorum ama scrape alanında az çok çalışmam var rate limitler mi çok düşük?
Yoksa linkleri çekersin ardından queye alırsın request cloudscraper ile istekleri atar atar htmlden verielri regexlersin,bu kadar basit değil mi?
Bir kez özel browser ile veya anti detect browser ile gezersin zaten rate limitleri saniyede en az 5 tanedir browserdan çekersin cookieyi cloudscraper gibi kütüphanelerle istek atarsın olur biter çok zor değildir diye düşünüyorum ama farklı bir zorluk mu var?
Ek: Smm panel sağlayıcısıyım yani büyük algoritmalarda çalıştığım için basitmiş gibi yorum atıyorum. 		normal basit siteler için evet öyle fakat sahibinden algoritması çok katı ve sert işin çok zor yaparsan bana mesaj at başardığını görüp kutlamak isterim

soylenmezsmt · Answer

imranran adlı üyeden alıntı:						mesajı görüntüle									Galiba koca sitede proxysiz geçenlerden 1 kişiyim :d zor kardeşim bilgin yoksa çok zor herkes akıllı çekmeye çalışıyor sahibindenden akıllı olman lazım 		Hocam sahibinden ile ilgilenmiyorum ama scrape alanında az çok çalışmam var rate limitler mi çok düşük?
Yoksa linkleri çekersin ardından queye alırsın request cloudscraper ile istekleri atar atar htmlden verielri regexlersin,bu kadar basit değil mi?
Bir kez özel browser ile veya anti detect browser ile gezersin zaten rate limitleri saniyede en az 5 tanedir browserdan çekersin cookieyi cloudscraper gibi kütüphanelerle istek atarsın olur biter çok zor değildir diye düşünüyorum ama farklı bir zorluk mu var?
Ek: Smm panel sağlayıcısıyım yani büyük algoritmalarda çalıştığım için basitmiş gibi yorum atıyorum.

Shzofren · Answer

Ne kullanıyorsunuz request mi ?

imranran · Answer

SelimDev adlı üyeden alıntı:						mesajı görüntüle									Sahibindenden veri çekmeye çalışıyorum konut verisi 		Galiba koca sitede proxysiz geçenlerden 1 kişiyim :d zor kardeşim bilgin yoksa çok zor herkes akıllı çekmeye çalışıyor sahibindenden akıllı olman lazım

Chakallstr · Answer

ruflo kullan skili iyti

dnmzysnnn · Answer

Gizli sekmeden eklenti ile çek

SelimDev · Answer

Sahibindenden veri çekmeye çalışıyorum konut verisi