Çekmek istediğiniz verinin boyutu nedir. Request status kodunu kontrol ettiniz mi. Farklı bir kütüphane deneyebilirsin Scrapy kullanmanı öneririm. Çok farklı şekillerde özelleştirilebilir ve cloudflare bypass teknikleri var. Github da scrapy için özel proxy poollar var deneyebilirsin. Bunları yapamazsan selenium ile headless tarayıcı modunu da deneyebilirisn. User Agentini de güncel tut, sorunsuz veri çektiğin kendi agentini kullan ve header içeriğinde şunları kullandığından emin ol hocam.
'User-Agent':
'Accept':
'Accept-Encoding':
'Accept-Language':
'Sec-Fetch-Dest':
'Sec-Fetch-Mode':
'Sec-Fetch-Site': '
'Sec-Fetch-User':