Python Sabit Bir Kod Yazarak Tüm Sitelerden İçerik Çekilebilir mi?

Şöyle birşey düşündüm.
Arama motorundan kelimeler aratıp, Çıkan sonuçların linklerini çekip.
Her bir linke girip h1 <p> ve img dan başlık makale ve resim çekmeye çalışıyorum
Beautifulsoup ve requests ile yapıyorum.
Ama sanırım her sitede resim img src bulunmuyor
demin bir sitede data-src buldum img etiketi aldında.
Bu şekilde nasıl tüm sitelerden içerik çeken sabit kodlu bir bot yazabilirim

tüm siteler wp tabanlı olursa belki yapılabilir

Ne yazıkki tüm siteler wordpress değil. Amacım wordpress kullanmayan sitelerdende veri çekmek.
Bu konuda ne tavsiye edersiniz

Olur tabiki neden olmasın.

wordpress dorku yazın, yazılımı wordpress sitelerden çekebilecek şekilde ayarlayın. zaten yeterince wordpress site var, istediğiniz kadar makale elde edebilirsiniz

Nasıl, biraz anlatırsanız sevinirim.

Hocam zaten doğru yoldan gidiyorsun, bs ve requests ile bende yapıyorum scraping işini, sadece find_all yaparken multi class selector ile de işini devam ettirebilirsin, tagleri iyi takip et zaten bu konuya gerek kalmayacak. 😉

Sanırım resim class'ının yüzde 90 img src yada img data-src ile başlıyor.
Şuan 35 siteden resim çektim tamamında oldu
pozitif yorumunuz için teşekkürler. Amacım hunharca spam yapmak. Her siteye 10 milyon içerik göndermek.

@BusraARS;