As telas “Are You A Bot” podem fazer com que suas páginas sejam descartadas pelo Google
A verificação “você é um bot” usada para bloquear tráfego ruim às vezes pode fazer com que as páginas saiam do Google. No último episódio de Search Off the Record, John Mueller do Google explicou por que isso acontece, observando que isso pode fazer com que o Google considere sua página uma duplicata da página de outro site.
O problema
Quando a segurança de um site sinaliza um visitante como suspeito, ele mostra uma página “você é um bot” em vez do conteúdo real. Às vezes, esta página é devolvida ao Google como se fosse normal, levando o Google a indexá-la. Isso pode fazer com que o conteúdo real do site saia do índice ou seja substituído por esse intersticial.
Dado que a tela ‘você é um bot’ aparece em outros sites, o Google encontra várias páginas semelhantes. Ao detectar páginas que parecem duplicadas, o Google seleciona uma como versão canônica e considera as outras como duplicadas.
Além de afetar a indexação, esse problema também pode afetar qual página o Google vê como a versão principal do seu conteúdo. Ele pode selecionar uma página de outro site, fazendo com que sua página seja marcada como duplicada.
Mueller explicou que é difícil rastrear porque exige examinar a página selecionada pelo Google e depois trabalhar de trás para frente para determinar a causa. Além disso, como um visitante típico pode nunca encontrar o prompt “você é um bot”, parece não haver nada de errado quando você mesmo analisa o site.
Por que é difícil ver
As verificações normais do navegador podem não permitir que você veja a tela “você é um bot”, porque ela só aparece para visitantes sinalizados como suspeitos. Para você, a página provavelmente carrega normalmente.
Você terá que acessar o Search Console para confirmar que há um problema. O relatório de indexação de páginas sinaliza páginas como duplicadas ou canonizadas em outro lugar.
Além disso, a ferramenta de inspeção de URL do Search Console revela qual endereço o Google selecionou como versão principal. Se esse endereço pertencer a um site que não é seu, é uma boa ideia investigá-lo.
Por que isso é importante
Às vezes, podem surgir problemas sem quaisquer sinais óbvios no próprio site porque a tela “você é um bot” pode ser acionada por uma CDN, host ou camada de proteção de bot, em vez das páginas diretamente. Mueller mencionou que esse tipo de proteção pode ser ativado quando o rastreamento é detectado.
A solicitação foi processada com êxito, portanto, o instinto comum de procurar uma página quebrada não é útil aqui. Como o Google consegue acessar o site e obter uma resposta válida, o problema é que ele está recebendo o conteúdo errado. É por isso que a falha não é detectada por verificações que não reconhecem o que o Googlebot realmente vê.
Abordei um problema semelhante em que Mueller descreveu o erro “Página indexada sem conteúdo”. Nesse caso, as configurações de segurança de um site bloquearam silenciosamente o Googlebot, mas permitiram visitantes regulares, fazendo com que o Google carregasse a página sem receber qualquer conteúdo.
Olhando para o futuro
Se você se deparar com esse problema, entre em contato com quem gerencia seu serviço de segurança, CDN ou hospedagem na web para encontrar uma solução. Depois de consertar, peça ao Google para rastrear novamente por meio do Search Consoles Validate Fix. O Google também poderá detectar a correção durante o próximo rastreamento.
Imagem em destaque: Rock Tenys/Shutterstock
