Bot robots.txt ile kısıtlamadığın sürece her yola girmeyi deneyebilir.