Bu konu altına indirme linkini yazcam arkadaşlar.Spider XML.HTTP değildir.Başka bir bileşendir.GoogleBot 'un yaptığı işlemleri yapabilir.

Örneğin sayfalardaki bütün linkleri bulup o linklerin kaynak kodlarını sunucuda kendisine ait olan temp klasörüne atar.Siz buradan işinizi gördükten sonrada isterseniz temp içindekileri silebilirsiniz.Daha bunun gibi birçok özelliği vardır.Bunun kodlarını kullanmıştım bileşendeki hemen hemen bütün komutların ne işe yaradığını biliyorum onlarıda açıklarım.arameta.com diye bir projem vardı bu botu onun için kullanacaktım.Fakat zamanım az olduğu için fazla ilerleme kat edemedim.İnş. zamanı gelince bitircem.