Onde colocar cada arquivo?

robots.txt e ads.txt na raiz do domínio; security.txt em /.well-known/security.txt.

Preciso de múltiplos grupos no robots.txt?

Sites simples usam apenas o grupo User-agent: *; grupos extras atendem regras específicas por bot.

Gerador de robots.txt / ads.txt / security.txt

Preencha os campos, gere o arquivo e baixe. Tudo acontece no seu navegador.

Domínio (opcional)

Usado para declarar o Sitemap: completo (opcional).

Sitemap (opcional)

Regra padrão (User-agent: *)

Prévia

Instalação: coloque o arquivo em /robots.txt na raiz do seu domínio.

Linhas (domínio, conta, tipo, autoridade)

Domínio	Conta	Tipo	Autoridade (ID)

Prévia

Instalação: coloque em /ads.txt na raiz. Exemplo Google: google.com, pub-XXXXXXXXXXXXXXXX, DIRECT, f08c47fec0942fa0

Contact (e-mail/URL)

Use mailto: para e-mail.

Expires

Policy (URL)

Encryption (URL da chave)

Acknowledgments (URL)

Hiring (URL)

Canonical (URL)

Prévia

Instalação: coloque em /.well-known/security.txt.

Perguntas frequentes

/robots.txt e /ads.txt ficam na raiz do domínio. O security.txt fica em /.well-known/security.txt.

Em sites simples, um grupo User-agent: * já resolve. Use grupos separados para regras específicas por bot.

Sobre os arquivos

O robots.txt orienta rastreadores sobre o que pode ou não ser indexado. O ads.txt informa vendedores autorizados de anúncios. O security.txt padroniza como pesquisadores podem reportar vulnerabilidades.