User-agent: *
Disallow:
Crawl-delay: 60 # 60 segundos entre cada request
Visit-time: 0300-1200 # 00:00 AM a 09:00 AM (America/Buenos_Aires)
Request-rate: 6/60m # permite indexar 6 documentos cada 60 minutos
Request-rate: 3/60m 1200-0300 # permite indexar 3 documentos cada 60 minutos entre las 09:00 AM a 00:00 AM (America/Buenos_Aires)

Disallow: /cgi-bin/
Disallow: /admin/
Disallow: /*.sql$
Disallow: /*https://www.elmetodosilva.com.ar/images/
# Bloqueo de las URL dinamicas
Disallow: /*?

# Bloqueo de busquedas
Disallow: /?s=
Disallow: /search

# Bloqueo de trackbacks
Disallow: /trackback
Disallow: /*trackback
Disallow: /*trackback*
Disallow: /*/trackback

# Permitir Google Webmaster Tool
User-agent: Googlebot
Allow: /*.js$
Allow: /*.css$

Allow: /*https://www.elmetodosilva.com.ar/images*/
Allow: /*https://www.elmetodosilva.com.ar/css/styles-minify.css*/
Sitemap: http://elmetodosilva.com.ar/sitemap_index.xml
User-agent:*
Disallow: