veritabanına ekleyebilirsiniz dediğiniz gibi ama alternatif olarak şu şekilde yapılabilir:
(cronjobu url değil direk komut / bash işlemi olarak ekleyin)
for i in $(seq 1 $(curl http://example.com/toplam_sayfa_sayisini_dondur)) ; do curl http://example.com/?sayfa=$i ; done
opsiyonel olarak arada örn 60 saniye beklesin derseniz:
for i in $(seq 1 $(curl http://example.com/toplam_sayfa_sayisini_dondur)) ; do curl http://example.com/?sayfa=$i && sleep 60 ; done
dilerseniz ücretli olarak yardımcı olabilirim