#"User-agent:"-> a qué bot van dirigidas las siguientes Disallows
#"Disallow:"-> qué archivos o carpetas no queremos que indexicen

#Prohibe ciertas carpetas o archivos:
User-agent: *
Disallow: /Private/
Disallow: /Temp/

#Ejemplos:
#---------------------------------------

#Permite todo:
#User-agent: *
#Disallow: 

#Prohibe todo:
#User-agent: *
#Disallow: /

#Prohibe ciertas carpetas o archivos:
#User-agent: *
#Disallow: /cgi-bin/
#Disallow: /directory/largepage.htm