önce robots.txt'den

disallow: */ornekjavascript.js

Ondan sonra headerlara bu kodu ekleyin php ise siteniz. mesela tema 1 linkiniz:
orneksite.com/theme-1/ornek-sayfa

 
    <?php
    $url = $_SERVER['REQUEST_URI'];
    if (strpos($url,'theme-1') !== false) {
        echo '<meta name="robots" content="noindex, nofollow" />' . "\n";
    }
?>

bu içinde theme-1 gecen butun url'leri indekslemeye kapatır ve sadece bu linklerde çalışır.



eger sadece html website yapiyorsaniz yine header kismina yukaridaki echo kodundaki icindeki nofollow noindex robots meta tagini kullanmalisiniz. yani aslina bakarsaniz sadece js yi kapamayla taramasini engelleyemezsiniz.

google in sadece sayfanin bir bolumunu taramama gibi bir olayi yok. 8-9 sene once vardi. suistimal nedeniyle bu ozelligi kapamislar. sadece yahoo da var.