Yanlış bir uygulama yapıyorsun. Rel canoncial etiketini veya noindex,follow etiketini kullanman daha faydalı olur.
Robots.txt'den Noindex dediğin zaman oradaki ne linkleri takip eder, ne de içerikleri.
Konu linkleri zaten sitemap da gönderiliyordur, haricen page dizininin altından okumasına gerek yok bence.