Hocam ben böyle zamanlarda sorunu şu şekilde çözüyorum...
while döngüsü ile 50tane sayfa çekiyorum ve tekrardan sayfayı yeniliyorum
adres satırından da get ile kaldığım yeri belirliyorum..
kabataslak örnek vermek gerekirse.

gidilecek adres... bot.php?baslangic=100

kodlar
$baslangic=$_get["baslangic"];
$bitis = $baslangic + 50;

while ($balangic<$bitis) {
$baslangic++;
curl site.com/sayfa=$baslangic
}

meta ile yönlendirme kodu koyuyosun sonra sonuna 5 saniye sonra tekrardan bot.php ye yönlendirme yapıyosun
fakat bu sefer yönlendirirken bot.php?baslangic=150 diyosun

150 den başlayıp devam ediyor.