Kullanım şekli bu şekilde

http://www.google.com.tr/robots.txt

eger google amcanın sayfalarını cache yapmasını istemiyorsanda da bu kodu koyman gerek sayfana

<META NAME="GOOGLEBOT" CONTENT="NOARCHIVE">