Arama motoru için geniş bir bandwith gerekiyor. Arama motorunun botları için. Ayrıca bot sadece keyword'se meta ya bakmıyorum. Tüm sayfanın içeriğine bakıyor. 1 sitede 1000 den sayfa sayfa taradığında 2. bir bot. taranmış sayfalarda tema denen gereksiz kısımları çıkarıyor. Geriye salt metin kalıyor. Bu konuda gayet başarılı.

Sitenin dışarı verdiği external linkleri alıp biriktiriyor. PR botu ile, taranan sayfa sayısına göre oranlıyor. Şuan için basit bir orantı ile en az geçen domainleri ve %90 dan fazla geçenleri ayrı ayrı dosyalara ekliyor. İlerde bot spam kotrolü yapabilmek için. En az geçenleri (%1 den az) bot motoruna ekliyor. ve taramaya başlıyor.

Arama sayfası bölümü üzerinde çalışıyorum şu an. güzel olucak.

Büyük konuşmuş olmayım ama, Googleye taş çıkaracak :P. Böyle deyince bi garip geliyor ama mantık süper.

Yurt dışında olması iyi olur. Bir de makine ufak bir mysql dbsi kullanıyorum. 200 MB yi geçmez. Gerisi hep diskte. Diskte tahminen 50GB kadar yer yiyecek.

sonra gelsin PR ler, Hitler reklamlar. $$$ lar.