Google bot'ların ne yaptığını takip etmek (PHP)

Eğer PHP ile çalışan bir scriptiniz varsa bu çok da zor değil. Uzun zamandır kullandığım bir kodu sizinle paylaşmak istedim bu gece. Google bot'ları sitenizde mi ? Ne zaman girmişler ? Hangi sayfayı indexlemişler ? Hepsini öğrenmeniz mümkün.

Önemli olan vereceğim kodu kesinlikle "her modülde/sayfada çağırılan (include) bir dosyaya yerleştirmeniz".

Örneğin benim URL'lerim şöyle;

index.php?sayfa=birinci_sayfa
index.php?sayfa=ikinci_sayfa
index.php?sayfa=konular&baslik=baslik+burada

Yani index.php her ziyarette ve her sayfada muhakkak çalışıyor. Sizin index.php'niz hangisiyse bu kodu o dosyaya yerleştirin lütfen.

if (eregi("Google", $_SERVER[HTTP_USER_AGENT])) {
$tarih = date("d/m/Y G:i:s");
$dosya = fopen ("volkan.txt" , 'a') or die ("Dosya açılamadı!");
fputs ( $dosya , "$tarih - $_SERVER[REMOTE_ADDR] - $_SERVER[HTTP_USER_AGENT] - $_SERVER[REQUEST_URI]\n" ) ;
fclose ($dosya);
}

Daha sonra bu kodu yerleştirdiğiniz dosyanın olduğu dizine volkan.txt diye içi boş bir dosya oluşturun. Bu dosyanın chmod ile erişimi 766 yapın.

Tüm işlemleri bitirdikten sonra online olarak botları takip etmek istiyorsanız ve SSH erişiminiz varsa volkan.txt'nin olduğu klasöre gidip komutunu uygulayın. Eğer böyle bir imkanınız yoksa FTP'den yahut Web server üzerinden volkan.txt'ye ulaşabilirsiniz.

Not: volkan.txt'yi belli periyodlarda silmenizi yahut bu işi otomatige alacak bir crontab oluşturmanızı tavsiye ederim. Zira volkan.txt nin boyutları büyüdüğünde performans sorunu ile karşılaşabilirsiniz.

Not 2: Bu kod volkan.txt boşken bile çok çok küçük de olsa performans düşüşüne sebep olabilir.

İşte az önceki loglarımdan bir kaçı;

Sevgiler.

<?php
if ( strpos( $_SERVER['HTTP_USER_AGENT'], 'Googlebot' ) !== false )
{

$email_address = 'isminiz@mail.com';


mail($email_address,'Googlebot Geldi', 'Googlebot bugun sitenizi ziyaret etti : '.$_SERVER['REQUEST_URI']);
}
?>


yada bole bişi war google her sitenizi ziyaret ettiği zmn mail geliyor...

if (eregi("Google", $_SERVER[HTTP_USER_AGENT])) {
$tarih = date("d/m/Y G:i:s");
$dosya = fopen ("volkan.txt" , 'a') or die ("Dosya açılamadı!");
fputs ( $dosya , "$tarih - $_SERVER[REMOTE_ADDR] - $_SERVER[HTTP_USER_AGENT] - $_SERVER[REQUEST_URI]\n" ) ;
fclose ($dosya);
}

sadece bu kodu index.php yemi yerlestirecegiz baska bi dosyaya yerlestirmiyorz demi? birde index.php dosyasinin en basina yerlestirdim bisey olmaz demi

CJ GoogleBot Activity

bu da aynı işi görür. tek include koduyla, işlem tamam.

Bende kurulu bu fakat sadece index.php'yi gösteriyor baska bi sayfayi göstermiyor benmi yanlis yaptim ?

Latest GoogleBot Crawling Activity

Evet sadece index.php ye yerleştiriyorsun. Başı sonu farketmiyor. Bir de aynı klasörde volkan.txt diye bir dosya olusturup chmod unu 755 yapman gerekiyor.

bunuda ben buldum, pek fark yok ama olsun , paylaşayım

alıntı ve detay : Googlebot Monitor

tşkkrler kullanacağım işnllh kodları..

güzel paylaşım hiç denememiştim denemeye deger