Cache sistemi ne şekilde çalışıyor?
Server taraflı bir cachele mi söz konusu?
Yoksa sayfa yönlendirme bazlı bir cache sistemi mi?
Yani sayfa talebi gelirse cache i kontrol et. Cache klasöründe Bu sayfanın son 2 dakika içinde cachelenmiş hali varsa oraya yönlendir. Yoksa cache klasörüne talep edilen sayfayı cache olarak yaz ve yönlendir.
Eğer sistem bu şekilde çalışıyorsa yönlendirmeler problem olur. Google bot da yönlendirilir. Ve indexlediği sayfanın farklı bir klasördeki kopyasını görebilir. Ve bu zararlı olabilir.
Hepsinde öte cache klasörünü robots.txt e kapatmazsanız sitenizdeki sayfaların kopyalarından oluşan bir ton kopya sayfanız olur.
Robots.txt dosyasına kesinlikle cache klasörünüzü google bota kapatan bir kod ekleyiniz.
Cache sistemini ne şekilde kodladığınızı bilmediğim için varsayımlarla yanıt veriyorum.
saygılar