# Permitimos que indexen google, Slurp, MSN, Bing y Mnogosearch pero poco a poco User-agent: Googlebot User-agent: Slurp User-agent: Monogosearch User-agent: msnbot User-agent: bingbot User-agent: wget Disallow: #Le decimos que espere 20 segundos entre una peticion y otra Crawl-delay: 20 #Indexar solo de 1:00 a 7:00 hora Greenwich Visit-time: 0100-0700 # En general User-agent: * Disallow: /