Tarama bütçesini bitirebilir. Robots.txt dosyası son tarama isteği ne zaman? Ayrıca bu sayfalara ekstra <meta name="robots" content="noindex"> eklerseniz Google indexlemeyecektir.