• 31-01-2024, 16:21:14
    #1
    Merhaba web scraping yapmam gerekiyor bir emlak sitesinden fakat cloudflare engelliyor. Tercihen python ile yazabilecek arkadaşlar yazabilir mi ?
    Selenium tarzı browserın açıldığı botlar istemiyorum sadece GET isteği ile çalışacak baya bi veri çekimi yapılacak çünkü hız kaybı olmasın.
  • 31-01-2024, 16:22:40
    #2
    https://rapidapi.com/zfcsoftware/api/scraper-api4
    bu muhtemelen geçer hocam çok ucuz bir dener misiniz
  • 31-01-2024, 16:30:54
    #3
    Locale çekmek için python kodu yazabilirim. Fakat WAF konfigürasyonu yapıldıysa delay eklemek gerekir ki çok zamanınızı alır. Asenkron olarak çekmek için servis satın almak gerekebilir. Big data dediğiniz için bunları söylüyorum.
  • 31-01-2024, 17:04:21
    #4
    Nons adlı üyeden alıntı: mesajı görüntüle
    Locale çekmek için python kodu yazabilirim. Fakat WAF konfigürasyonu yapıldıysa delay eklemek gerekir ki çok zamanınızı alır. Asenkron olarak çekmek için servis satın almak gerekebilir. Big data dediğiniz için bunları söylüyorum.
    Ben şuan halihazırda bi yerden çekiyorum aslında proxy kullanıyorum bir ip timeout yiyince diğerine geçiyor duraksamadan data çekmiş oluyorum fakat cloudflare olan sitelerde GET isteği attırmıyor direkt bot korumasına düşüyor o noktada takıdım
  • 01-02-2024, 19:23:25
    #5
    Hocam get isteği ile cloudflare bypass yapabileceğinizi pek düşünmüyorum ama kesin konuşmayayayım selenium isterseniz iletişim : Whatsapp İçin Tıklayınız.