Os AI Bots continuam sobrecarregando os servidores. Os proprietários de sites devem continuar pagando?
Os bots de IA estão afetando cada vez mais o desempenho, a análise, os custos de infraestrutura e a visibilidade do conteúdo dos sites. Novas pesquisas e dados de infraestrutura sugerem que o desafio não é mais simplesmente raspar, mas gerenciar como o tráfego automatizado interage com os sites e as empresas que deles dependem.
Raspar é o menor dos problemas
Muitas discussões entre SEOs e proprietários de sites centram-se na eliminação de bots de IA. É uma preocupação válida que os sistemas de IA coletem conteúdo para treinamento LLM com atribuição praticamente zero quando o conteúdo é remixado em uma resposta de IA.
- Os proprietários de sites se preocupam com a propriedade intelectual.
- Os profissionais de marketing de busca se preocupam com a forma como os sistemas de IA usam seu conteúdo.
Mas as equipas de infraestruturas estão cada vez mais a deparar-se com problemas diferentes e igualmente consequentes.
A banalidade dos bots se perderem e rasparem coisas
O problema é cada vez mais que muitos bots criam carga desnecessária, consomem recursos e, às vezes, ficam presos em loops ineficientes.
De acordo com o relatório, um padrão recorrente envolvia o rastreador meta-agente externo da Meta seguindo variações de URL por dias a fio antes que os sistemas de mitigação fossem detectados.
Esse tipo de comportamento não é malicioso. É uma automação operando com práticas de codificação inadequadas ou proteções insuficientes.
David Belson, da Cloudflare, ilustrou a banalidade dos bots perdidos que drenam recursos:
“Tem a pessoa que não sabia o que diabos estava fazendo ontem, mas a vibe codificou um bot hoje e o soltou. Eles nem se preocuparam em verificar o robots.txt.”
Essa observação captura uma realidade importante. Os problemas atuais de infraestrutura derivam de uma automação mal projetada que opera em grande escala.
Os bots estão consumindo recursos sem criar valor
A consequência desse comportamento é que os sites gastam recursos servindo tráfego automatizado que pode fornecer pouco ou nenhum valor comercial em troca.
Este é um grande problema para sites de comércio eletrônico. Ao contrário das solicitações de páginas estáticas, as solicitações relacionadas ao carrinho normalmente ignoram o cache e exigem que o servidor use recursos. Dependendo da arquitetura do site, essas solicitações podem desencadear a execução de PHP, consultas de banco de dados, manipulação de sessões e outros processos que consomem muitos recursos.
Visto sob esse prisma, scraping é o menor dos problemas de um site. Um rastreador que aciona repetidamente lógica de aplicativo dispendiosa e consome recursos do servidor prejudica o desempenho de visitantes legítimos.
O impacto económico não deve ser ignorado. De acordo com o relatório, cerca de 80% da atividade de rastreamento de IA está associada ao treinamento de modelo, eclipsando a pesquisa ou rastreamentos conduzidos pelo usuário.
Para muitas empresas, a questão é: existe valor retornado por esse tráfego que justifique os recursos consumidos?
As empresas estão presas entre visibilidade e custo
Se a solução fosse simplesmente bloquear bots, o problema estaria resolvido. Infelizmente, muitos sistemas automatizados que consomem recursos também estão ligados à descoberta e à visibilidade.
Alguns bots ajudam os mecanismos de pesquisa a descobrir conteúdo. Alguns podem contribuir para citações de IA e visibilidade em respostas geradas por IA. Outros podem simplesmente consumir conteúdo e recursos sem produzir benefícios comerciais diretamente mensuráveis.
Solicita-se às empresas que absorvam os custos do tráfego automatizado e, ao mesmo tempo, avaliem se esse tráfego contribui com visibilidade suficiente para justificar esses custos.
A questão agora: por quais bots vale a pena pagar?
O relatório argumenta que os proprietários de sites devem fazer esta pergunta:
Quais bots, em quais partes do meu site, em que condições?
O gerenciamento de bots afeta a visibilidade, os custos de infraestrutura e o desempenho do site. O objetivo é alinhar o tráfego automatizado com os objetivos de negócios.
Os números de tráfego já podem ser afetados
O tráfego automatizado também afeta a análise do site. De acordo com o relatório, o tráfego de bots de IA aumentou 300% no ano passado. No final de 2025, aproximadamente uma em cada 31 visitas à rede da TollBit originou-se de um bot de IA.
À medida que o tráfego automatizado cresce, o volume de tráfego por si só se torna um indicador menos confiável do crescimento do público.
Um site pode mostrar contagens crescentes de visitas, mas não apresenta aumento correspondente em clientes, assinantes, conversões ou receita. Em alguns casos, o tráfego adicional pode ser automatizado.
O relatório argumenta que os sinais mais significativos vêm de métricas vinculadas a resultados reais de negócios, incluindo demanda de pesquisa de marca, tráfego direto, qualidade de engajamento e receita.
À medida que os sistemas automatizados respondem por uma parcela maior do tráfego geral, as contagens brutas de visitas tornam-se menos úteis como medida autônoma de sucesso.
Soluções e táticas de mitigação
O relatório defende uma abordagem deliberada para o gerenciamento de bots.
O primeiro passo é a visibilidade.
Antes de fazer alterações, os proprietários de sites devem entender o que o tráfego automatizado está realmente fazendo. O objetivo não é identificar cada bot individual, mas identificar padrões como solicitações repetidas, loops e atividades focadas em endpoints dinâmicos.
A segunda etapa é proteger as funções do site de alto custo.
URLs de carrinho, caminhos de checkout, páginas de pesquisa interna, páginas de produtos filtrados e URLs com muitos parâmetros geralmente consomem significativamente mais recursos do que páginas de conteúdo padrão. Restringir o acesso desnecessário do rastreador a essas áreas pode reduzir o desperdício sem afetar conteúdos importantes.
O relatório também recomenda separar os rastreadores de pesquisa dos rastreadores de IA.
Nem todo bot fornece o mesmo valor. Os rastreadores de pesquisa contribuem diretamente para a descoberta e merecem acesso mais amplo do que os rastreadores de treinamento de IA ou raspadores desconhecidos.
Uma política única aplicada a cada sistema automatizado já não pode ser justificada à medida que o ecossistema se torna mais complexo. É por isso que o relatório defende mudanças específicas em vez de restrições amplas.
O objetivo não é eliminar o tráfego automatizado. O objetivo é gerenciá-lo de uma forma que apoie os objetivos de negócios e, ao mesmo tempo, reduza custos desnecessários. Uma maneira é decidir quais bots podem acessar partes específicas de um site e em que circunstâncias.
Conclusões
O tráfego de bots não é mais um problema de raspagem. Os dados sugerem que se tornou um problema de infraestrutura, visibilidade, análise e gestão de negócios.
O maior desafio é que muitos bots estão consumindo recursos, acionando funcionalidades caras, inflando métricas de tráfego e criando custos que os proprietários de sites devem absorver.
O gerenciamento de bots não consiste em bloquear a maioria dos bots. Trata-se de gerenciar bots de acordo com o que o site está otimizando, distinguindo entre tráfego automatizado valioso e desnecessário.
Leia o relatório baseado em dados da Kinsta:
A verificação da realidade do tráfego de IA e bot
Imagem em destaque da Shutterstock/DC Studio
