Robots.txt ile dosya yolunu engelleyebilirsin. Ancak dosya yolunda yararlı engellenmemesi gereken bir URL ve kaynak bulunmadığından emin olmasın. Nasıl ekleyeceğin konusunda aşağıda sana bağlantı bırakıyorum ayrıca kötü ve spam botları engelleyebileceğin bir liste mevcut.
https://www.kukumav.net/blog/robots-txt-olusturma/