Gerador de robots.txt

Crie robots.txt com regras de indexação, diretivas Disallow e link para sitemap.xml.

Use como modelo inicial. Revise as regras conforme a estrutura do seu site antes de publicar.

Configurações

Domínio do site

Regra principal

Regras Disallow adicionais — um caminho por linha

Sitemap URL

Готовый robots.txt

User-agent: *

Sobre esta ferramenta — Gerador de robots.txt

Crie robots.txt com regras de indexação, diretivas Disallow e link para sitemap.xml.

Informe o domínio, escolha a regra principal e adicione caminhos bloqueados. Gere um robots.txt pronto para Google, Yandex e outros crawlers. A ferramenta funciona diretamente na página do DEVNEW.ORG e não exige a instalação de software adicional. É útil para proprietários de sites, desenvolvedores, especialistas em SEO, designers e qualquer pessoa que precise de um utilitário online rápido. Use gratuitamente em tarefas profissionais ou pessoais.

Veja também

Gerador de sitemap.xml

Crie um sitemap XML automaticamente a partir de um site ou da sua lista de URLs.

Abrir ferramenta

Gerador de Meta Tags

Crie Meta Title, Description, Robots, Canonical e Open Graph para páginas web.

Abrir ferramenta

Teste de velocidade do site

Verifique status HTTP, tempo de conexão, TTFB, carregamento HTML e tamanho da resposta.

Abrir ferramenta