.html/ ile biten link sorunu

Merhaba arkadaşlar;

Uzun süredir yayında olan bir sitem ile ilgili garip bir durum var. Normalde linklerim .html ile bitiyor ama Googlebot linklerimi .html/ olarakta tarıyor. Bende bu durumu .html/ olan linkleri 301 ile .html olan linklere yönlendiriyorum. Tarama bütçesini doğru kullanmak adına robots.txt de .html/ disallow ile botların erişimini engelleme mantıklı bir çözüm olabilir mi?

Şu an yaptığımız mı daha mantıklı karar veremedim. Özellikle yazılım için .html/ linkine yönlenmesi için herhangi bir kural veya unutulmuş bir link yöntemi bulunmuyor. Ama google ısrarla .html/ şeklinde de erişmeye çalışıyor.

Teşekkürler.

Bu durumda robots.txt ile .html/ uzantılı URL’leri disallow etmek mantıklı bir çözüm değildir.
Site haritanızda (sitemap.xml) sadece doğru URL’leri (.html uzantılı olmayanları) listeleyin.

Hocam merhaba;
anladım. sitemaplerde zaten .html olan linkler mevcut. Google .html/ olanlara da erişmeye çalışıyor ama böyle linkler hiç bir zaman olmadı. Bende .html/ olanlara 301 leyip .html versiyonlarına yönlendirmiştim.

Kaynak kodlarınızı da incelemenizi öneririm hocam. Kaynak kodlarınızda bu tür URL'ler olabilir. Detaylı bir şekilde kontrol etmenizi öneriyorum.