É um impulso ou uma perda de tempo?

Muitos plugins populares de SEO e plataformas de gerenciamento de conteúdo oferecem a capacidade de gerar LLMs.txt com o objetivo de melhorar a visibilidade nas plataformas de pesquisa de IA. Com tantos plugins de SEO populares e plataformas CMS oferecendo a funcionalidade LLMs.txt, pode -se ter a impressão de que é a nova fronteira do SEO. O fato, no entanto, é que o llms.txt é apenas uma proposta, e nenhuma plataforma de IA assinou contratada para usá -la.

Então, por que tantas empresas estão correndo para apoiar um padrão que ninguém realmente usa? Algumas ferramentas de SEO oferecem porque seus usuários estão pedindo, enquanto muitos usuários precisam que precisem adotar llms.txt simplesmente porque suas ferramentas favoritas o fornecem. Uma discussão recente do Reddit sobre esse mesmo tópico é um bom lugar para procurar respostas.

Tool de SEO de terceiros e llms.txt

John Mueller, do Google, abordou a confusão llms.txt em uma discussão recente do Reddit. A pessoa que fazia a pergunta estava preocupada porque uma ferramenta de SEO sinalizou como 404, faltando. O usuário teve a impressão de que a ferramenta implicava que era necessária.

A pergunta deles era:

“Por que o SEMRush está mostrando que o /llm.txt é um 404? Sim, eu. Sabe que não tenho um para o site, mas ouvi dizer que é inútil e não é necessário. Isso é verdade?

Se eu precisar, como faço para construí -lo?

Obrigado”

O redditor parece estar confuso com a auditoria SEMRush que parece sugerir que eles precisam de um llms.txt. Não sei o que eles viram na auditoria, mas é isso que a documentação oficial de auditoria do SEMRush compartilha sobre a utilidade do llms.txt:

“Se o seu site não possui um arquivo claro llms.txt, corre o risco de ser deturpado pelos sistemas de IA.

… Esta nova verificação facilita a identificação rapidamente de quaisquer problemas que possam limitar sua exposição nos resultados de pesquisa da IA. ”

A documentação deles diz que é um “risco” não ter um llms.txt, mas o fato é que existe Absolutamente nenhum risco Porque nenhuma plataforma de IA usa. E pode ser por isso que o redditor estava fazendo a pergunta: “Se eu precisar, como faço para construí -lo?”

Llms.txt é desnecessário

John Mueller, do Google, confirmou que o LLMS.txt é desnecessário.

Ele explicou:

“Boa captura! Especialmente em SEO, é importante capturar informações enganosas e ruins, antes de investir tempo para fazer algo desnecessário. Questione tudo.”

Por que as plataformas de IA podem optar por não usar llms.txt

Além das muitas declarações informais de John Mueller sobre a inutilidade do llms.txt, não acho que haja declarações formais das plataformas de IA sobre o motivo pelo qual eles não usam o LLMS.txt e seus textos de marcação .MD associados. No entanto, existem muitas boas razões pelas quais uma plataforma de IA escolheria não usá -la.

A maior razão para não usar o llms.txt é que ele é inerentemente não confiável. O conteúdo na página é relativamente confiável, porque é o mesmo para os usuários que é para um bot da IA.

Um SEO sorrateiro pode adicionar coisas aos dados estruturados e textos de marcação que não existem no conteúdo HTML regular, a fim de obter seu conteúdo para classificar melhor. É ingênuo pensar que um SEO ou editor não usaria arquivos .md para enganar as plataformas de IA.

Por exemplo, os SEOs sem escrúpulos adicionam texto oculto e a IA solicita dentro do conteúdo HTML. Um artigo de pesquisa de 2024 (Otimização do mecanismo de pesquisa adversária para modelos de linguagem grandes) mostraram que a manipulação do LLMS era possível usando uma técnica que eles chamavam de ataques de manipulação de preferência.

Aqui está uma citação desse artigo de pesquisa (PDF):

“… um invasor pode enganar um LLM a promover seu conteúdo sobre os concorrentes. Os ataques de manipulação de preferência são uma nova ameaça que combina elementos de ataques rápidos de injeção … Otimização de mecanismos de pesquisa (SEO) … e LLM ‘Persuasion’.

Demonstramos a eficácia dos ataques de manipulação de preferência aos mecanismos de pesquisa de produção LLM (Bing e Perplexity) e APIs de plug-in (para GPT-4 e Claude). Nossos ataques são de caixa preta, furtivos e manipulam de maneira confiável o LLM para promover o conteúdo do invasor. Por exemplo, ao pedir ao Bing procurar uma câmera para recomendar, um ataque de manipulação de preferência torna a câmera alvo 2,5 × mais provável de ser recomendada pelo LLM. ”

O ponto é que, se houver uma brecha a ser explorada, alguém pensará que é uma boa ideia tirar proveito dela, e esse é o problema de criar um arquivo separado para a IA Chatbots: as pessoas o verão como o local ideal para spam LLMs.

É mais seguro confiar no conteúdo na página do que em um arquivo de remarca que pode ser alterado exclusivamente para a IA. É por isso que digo que o llms.txt é inerentemente não confiável.

O que os plugins de SEO dizem sobre llms.txt

Os criadores do plug -in de SEO do WordPress agilados reconhecem que forneceram o recurso apenas porque seus usuários pediram e afirmam que não tem influência na visibilidade da pesquisa de IA.

Eles escrevem:

“Eu sei que muitos de vocês adoram usar o SEO agressivo e querem continuar usando. É por isso que você nos pediu para trazer esse recurso.

Então nós trouxemos.

Mas, porque eu me preocupo com você:

– Saiba que o LLMS TXT não o ajudará magicamente na pesquisa de IA. Atualmente, não há provas de que isso ajude a ser promovido pelos mecanismos de busca de IA. ”

Eles alcançam um bom equilíbrio entre dar aos usuários o que eles querer Ao mesmo tempo que eles sabem que não é realmente necessário.

Enquanto Squirrly está em uma extremidade dizendo (corretamente) que o LLMS.txt não aumenta a visibilidade da pesquisa da IA, a matemática de classificação está do lado oposto, dizendo que o AI Chatbots realmente usa a versão com curadoria do conteúdo apresentado nos arquivos de marcação.

A matemática de classificação geralmente está correta em sua descrição do que é um llms.txt e como funciona, mas exagera a utilidade, sugerindo que os chatbots da IA ​​usam o llms.txt com curadoria e os arquivos de marcação associados.

Eles escrevem:

“Então, quando um chatbot de IA tenta resumir ou responder a perguntas com base no seu site, ele não adivinhe-refere-se à versão com curadoria que você deu. Isso aumenta suas chances de ser citado corretamente, representado com precisão e descoberto pelos usuários em resultados movidos a IA.”

Sabemos de fato que a IA Chatbots não usa uma versão com curadoria do conteúdo. Eles nem usam dados estruturados; Eles apenas usam o conteúdo HTML regular.

O Yoast SEO é um pouco mais conservador, ocupando uma posição no centro entre o Squirrly e o Rank Math, explicando o objetivo do llms.txt, mas não exagerando os benefícios, protegendo com palavras como “Can” e “poderia”. Essa é uma maneira justa de descrever o LLMS.txt, embora eu goste da abordagem de Squirrly que diz, você pediu, aqui está, mas não espere um impulso no desempenho da pesquisa.

O loop de desinformação llms.txt

A conversa sobre llms.txt tornou-se um loop auto-reforçador: os empresários e os SEOs sentem ansiedade pela visibilidade da IA ​​e sentem que devem fazer algo, vendo llms.txt como algo que eles podem fazer.

Os provedores de ferramentas de SEO são obrigados a fornecer a opção LLMs.txt, reforçando a crença de que é uma necessidade, perpetuando involuntariamente o ciclo de mal -entendidos.

A preocupação com a visibilidade da IA ​​levou à adoção do llms.txt, que nesta fase é apenas uma proposta para um padrão que nenhuma plataforma de IA usa atualmente.

Imagem em destaque de Shutterstock/James Delia