ne alaka robots.txt botların indexlemesini istemedigin yerlerdin örnegin kendine özel yer açarsın indexini istemezsin oraya eklersin