Google siteme kullanıcı olarak şifreyle girebiliyor her yere erişebiliyor
bütün sayfadaki verileri ajax la birliktede getirip gösterebilirim ama oda sistemi ağırlaştırır hem ajax yapmanın bir anlamıda kalmaz diye düşünüyorum
Yanlış düşünüyorsunuz. google yada türevi botlar. sitenizdeki javascript kodlari çalıştıramazlar. yada formları post edemezler. arama motoru optimizasyonuda zaten bunu gerektirir.
test için wget in linux yada windows versiyonuda var.
wget -r
http://domain.com
gibi deneyerek neleri indexledigini ve neleri indexlemedigini görebilirsiniz