Hocam tekrar gönderdikten sonra sorun düzeldi sanırım.
Tablo aşağıdaki gibi çıkıyor artık.



Aşağıdaki resimde oluşan bazı problemler var gibi
örneği bu robots.txt ile kısıtlanan url leri nasıl düzeltiriz.?