Bir web sitesinin tüm url leri

Arkadaşlar selamlar, bir web sitesinde bulunan tüm url ellere nereden ulaşabilirim. (Robor.txt ve sitemap i bulunmayan siteler içi) böyle bir toplum var mıdır?

Sitemap dosyası bulunmuyorsa İç Link Araçları bulunuyor spesifik bir şekilde en fazla o araçlar size yardımcı olabilir.

Online toollar ile o sitenin xml'ini oluşturabilirsiniz. Oradan tüm linkleri çekebilirsiniz diye düşünüyorum. "Sitemap Generator" kelimesi ile birçok online tool mevcut. https://octopus.do/sitemap/resource/generator bu adrese bakabilirsiniz.

Site sizin ve Worpress kullanıyorsanız Export All URLs eklentisi ile tüm urllerin çıktısını alabilirsiniz.

Bunun botu vardı sitenin tüm urllerini çeken

Screaming frog uygulamasinda taratin hepsi cikar