Robots.txt dosyasından .js dosyalarını disallow edersek başımıza nasıl olaylar gelir? Bunu neden istiyorum diye soracak olursanız : http loglarından siteme google'ın botlarının geldiği istekleri kontrol ettiğimde daha önce cache almasın diye main.js?v=12312321(timestamp) şeklinde js linklerini vermiştim bu da tabi google'da bu dosyanın yüzlerce sürümünün olmasına sebep olmuş. Loglara baktığımda
GET /templates/js/main.js?time=1525743978 HTTP/1.1
GET /templates/js/main.js?time=1525389313 HTTP/1.1
GET /templates/js/main.js?time=1526055847 HTTP/1.1
şeklinde kayıtlar(1500+ kayıt) buldum. Bu da bot crawl bütçesinde olumsuz etki yapar diye düşünüyorum. Sizce de yapar mı? Yaparsa nasıl bir çözüme gitmeliyim?