cfscrape - R10.net

28-04-2021, 03:01:53

Kimlik doğrulama veya yönetimden onay bekliyor.

Selamın Aleyküm
Pythonda requests ile veri cekerken cloudflare geçmek için" cfscrape"diye bir kütüphane varmış.Kullanımıyla ilgili pek bir şey bulamadım.Kullanmasını bilen var mı acaba.

28-04-2021, 04:33:05

#2

MontyPython

import cfscrape

scraper = cfscrape.create_scraper() # Nesne oluşturduk.
print scraper.get("http://siteadi.com").content # => "<!DOCTYPE html><html><head>..."

28-04-2021, 22:07:41

#3

Volg29

MontyPython adlı üyeden alıntı: mesajı görüntüle

importcfscrape

scraper = cfscrape.create_scraper() # Nesne oluşturduk.
print scraper.get("http://siteadi.com").content # => "<!DOCTYPE html><html><head>..."

Teşekkürler "<!DOCTYPE html><html><head> buraya bir şey yazmama gerek var mı?

28-04-2021, 22:08:59

#4

hkey

Volg29 adlı üyeden alıntı: mesajı görüntüle

Teşekkürler "<!DOCTYPE html><html><head> buraya bir şey yazmama gerek var mı?

o kısım yorum satırı, döndüreceği içeriği göstermiş

28-04-2021, 22:24:48

#5

Volg29

hkey adlı üyeden alıntı: mesajı görüntüle

o kısım yorum satırı, döndüreceği içeriği göstermiş

Teşekkürler

29-04-2021, 18:36:17

#6

Volg29

MontyPython adlı üyeden alıntı: mesajı görüntüle

importcfscrape

scraper = cfscrape.create_scraper() # Nesne oluşturduk.
print scraper.get("http://siteadi.com").content # => "<!DOCTYPE html><html><head>..."

şöyle bir hatta alıyorum.

29-04-2021, 18:37:48

#7

mertcangokgoz

Cloudflare'de yapılan son güncellemeler ile(her ay değişiyor yapı) kullandığınız kütüphane aracılığı ile cloudflare kullanan sayfaları geçemezsiniz. Eklentiyi geliştiren arkadaş bile bıktığından geliştirmeyi iyiden iyiye bıraktı. Alternatif yöntemler arayınız.

29-04-2021, 18:40:05

#8

Volg29

mertcangokgoz adlı üyeden alıntı: mesajı görüntüle

Cloudflare'de yapılan son güncellemeler ile(her ay değişiyor yapı) kullandığınız kütüphane aracılığı ile cloudflare kullanan sayfaları geçemezsiniz. Eklentiyi geliştiren arkadaş bile bıktığından geliştirmeyi iyiden iyiye bıraktı. Alternatif yöntemler arayınız.

Teşekkür ederim. Alternatif olarak ne önerirsiniz mesela Selenium bu sorunu geçebilirmiyim?

29-04-2021, 18:41:27

#9

mertcangokgoz

Volg29 adlı üyeden alıntı: mesajı görüntüle

Teşekkür ederim. Alternatif olarak ne önerirsiniz mesela Selenium bu sorunu geçebilirmiyim?

Evet ama kısmen, Birebir simule etseniz bile birinci haftanın sonunda botmusun diye önüne captcha çıkartacak. El ile veya 2captcha gibi yerler ile captcha çözümünü yaptırıp devam etme imkanın evet var ama süreci çok uzatıyor.