variotools / Web / SEO / Gerador de robots.txt

Gerador de robots.txt

Name: Gerador de robots.txt Online Grátis — Crie arquivos robots.txt com regras por user-agent, sitemap e host
Availability: InStock

Crie arquivos robots.txt com regras por user-agent, sitemap e host

Modelos

Regra 1

User-agent

Allow

Disallow

Crawl-delay (segundos)

URL do sitemap

Host

robots.txt

User-agent: *
Allow: /