variotools / Web / SEO / Generador de robots.txt

Generador de robots.txt

Name: Generador de robots.txt
Availability: InStock

Crea archivos robots.txt con reglas por user-agent, sitemap y host

Plantillas

Regla 1

User-agent

Allow

Disallow

Crawl-delay (segundos)

URL del sitemap

Host

robots.txt

User-agent: *
Allow: /