Google botları tarama esnasında tespit ettiği tüm linkleri tarar bildiğim kadarıyla siten anlık yükü kaldıramadığı ya da ratelimit tarzı bir olay devreye girdiği için hata alıyorsun.