Bir websitesi var örneklemek gerekir ise aaa.com/123.html aaa.com/1234.txt gibi ben bu indexleri nasıl bulabilirim ?

Sitemap.xml yada robots.txt dosyaları yok