tabi tabi haklısın sadece URL yapısına bakarak buna karar vermiyor, demek istediğim belki de o path altındaki içeriklerde bir spam vs. oranı yüksek gelmiştir. Biraz daha bekle bakalım o sayfalarda düşük kalite olanlar varsa onları analiz etmeni öneririm.
hocam path altındaki verilere crawl için hiç gelmedi daha aslında yani sayfalarda ne olduğunu nelerden oluştuğunu vs bilmiyor