Veri toplayan Bot yazdirilacak

22-09-2018, 23:54:40

Merhaba, belirtecegim siteden veri ceken bir bot yazdirmak istiyorum.
Dikkat edilmesi gereken nokta ise hedef sitede asiri fazla icerik olmasi.
Yüzbinlerce sayfa var. Her sayfaya girecek, belirlenmis bir linke tiklayacak, acilan sayfada yine bir linke tiklayacak, acilan modal penceresindeki 8-10 satirlik verinin her birini ayri sütunlara kaydetmek üzere alacak ve sonra siradaki sayfaya gececek.
Yani x saniyede timeout a düsen, günlerce calismasi gerken bir uygulama olmamali.

Sayfalar kategorilere ayrilmis durumda.
Ben kategoriyi sececegim ve islemi baslatacagim, birer birer havuza düsecek bilgiler.
Eger o bilgi daha önce kaydedilmisse, pas gececek.
Desktop (win/mac)veya server (linux) üzerinde calsiacak sekilde olabilir.

Yaparim diyenler pm gönderebilir.
Tesekkürler.

22-09-2018, 23:59:58

#2