anlıyorum istediğinizi ama dediğim gibi içerik çekebilmek için mucizevi, her sayfada işlevi olan bir program algoritma formül malesef yok.
öyle bir sistem kurarsınız ki her siteyi önceden tanır bilir. Aksi halde düz mantık yürüttüğümüzü farz edelim.
Bir program yazdık, her hangi bir siteye bağlandı ve bütün "<img" ile başlayan elementlerin "src" parametresindeki adresleri alıp getirebiliriz. Ama malesef bu bağlantıların hepsi işe yarayan bağlantılar olmaz. Sitenin logosu da gelecek, sitenin düğmeleri (imaj kullanıldıysa) bile gelecektir. O zaman işin içine administration hadisesi girer. Kurarız size örümceği, verirsiniz adresleri gün boyunca tarar tüm siteleri toplar tüm bağlantıları önünüze serer. Atıyorum 100bin resim önünüzde analiz etmeniz için bekler. Oturup her gün bunları tek tek işe yarar işe yaramaz diye işaretlemeniz gerekir.
Diyebilirsiniz ki her resmi sistem indirsin çözünürlüklerine baksın mesela 100 x 100'den büyük her fotoğraf işime yarar.. Ben de derim ki işe yaramayan bir resim de çok rahat şekilde 100 x 100 boyutlarında olabilir. Kısacası böyle kıstaslar da bir otomasyon sağlamaya yetmeyecektir malesef...
Dediğim gibi aklıma gelen en sağlıklı yöntem insan gözüyle resimlerin tek tek analiz edilmesi diye düşünüyorum. Ama günlük binlerce resmi kim incelemek ister orası meçhul...
Diğer yöntem de içeriği alınacak siteleri programa dahil etmekte yatıyor ama dediğinize göre o sitelerin de sayısı hiç yadsınacak gibi değil