Oluşturmanızda fayda var. Sadece google değil diğer botlar da oradan site haritalarını okur.
Araştırdığım kadarıyla, robots.txt dosyasında bot'un girmesini istemediğimi yerleri yazıyoruz.. Bu durum için gerekli birşey olsa gerek.
Fakat ben açtığım sayfalara zaten girmesini istiyorum, bunun için kurmama gerek kalmıyor?