Qual é a diferença entre llms.txt, robots.txt e sitemap?
Os três artefatos respondem a necessidades diferentes. llms.txt orienta a consulta; robots.txt informa regras de rastreamento; sitemap enumera URLs para descoberta. Uma empresa pode manter todos, desde que cada um reflita o estado real das páginas. Nenhum arquivo corrige, por si, um conteúdo inacessível ou uma afirmação sem comprovação.
- llms.txt: contexto e referências selecionadas.
- robots.txt: regras por agente e caminho.
- sitemap: URLs canônicas elegíveis para descoberta.
Como selecionar o que entra no arquivo?
Escolha primeiro as páginas que respondem às necessidades recorrentes de quem consulta o site. Escreva descrições que expliquem quando usar cada referência. Evite copiar todo o acervo para um índice extenso: um guia útil ajuda a escolher e depois aprofundar. Informações comerciais e políticas devem apontar para a versão oficial mantida pela empresa.
- Apresente identidade, finalidade e escopo do site.
- Agrupe links por tarefa ou assunto.
- Mantenha versões Markdown equivalentes ao conteúdo humano quando disponíveis.
- Deixe relatos em revisão fora das fontes recomendadas até resolver suas pendências.
Como validar a publicação?
Abra cada destino e confira status, título e conteúdo. Teste se um agente consegue encontrar a referência adequada a uma pergunta concreta, preservando fonte e data na resposta. A execução deve produzir um registro verificável; um arquivo existente ou uma nota de auditoria não demonstra que todos os serviços o leem.
- Conferir URLs e eventuais redirecionamentos.
- Comparar HTML e Markdown para evitar versões contraditórias.
- Revisar o índice quando uma página mudar de estado editorial.
Perguntas frequentes
É requisito para AI Overviews e AI Mode?
O Google informa que não é necessário criar arquivos especiais de texto para aparecer nesses recursos. A elegibilidade segue os requisitos publicados para a busca.
O arquivo pode liberar uma página privada?
Não. Ele não fornece autenticação nem substitui permissões. Liste apenas recursos apropriados ao público que poderá consultá-lo.
Como saber se está funcionando?
Defina uma tarefa, observe a navegação do agente e confira a resposta resultante. Separe esse teste controlado de visibilidade em serviços externos, que exige observação própria.
Conclusão
Mantenha llms.txt quando ele oferecer uma entrada útil para agentes. O índice deve apontar para informação confiável, não multiplicar conteúdo nem prometer ranking. Seu efeito precisa ser descrito com o escopo do teste realizado.
Fontes
- llms.txt — proposta original, versão 2 — Proposta de guia e referências legíveis por agentes; sua publicação não é prova de adoção por um motor específico.
- Google Search Central — recursos de IA — Requisitos de elegibilidade, acesso ao conteúdo e ausência de garantia de inclusão nos recursos de IA do Google.
- Google Search Central — robots.txt — O arquivo controla rastreamento; não é mecanismo de autenticação nem garante remoção do índice.
- Google Search Central — criar e enviar sitemaps — Seleção de URLs canônicas, lastmod significativo e limites do envio de sitemap.
