Provedores de dados SERP afirmam que o Google está limitando os links de resultados Goto
O Google está restringindo a velocidade com que qualquer pessoa pode seguir os redirecionamentos (google.com/goto) para resultados de pesquisa em cada página, conforme DataForSEO e Serper. Ambos vendem acesso à API de resultados de pesquisa do Google. Devido a esta restrição, os dados de classificação fornecidos por esses serviços podem conter URLs de redirecionamento do Google em vez de URLs reais.
De acordo com DataForSEO, as restrições significam que alguns de seus modos de solicitação resolveram apenas parte dos URLs de destino. A página de status do Serper notou o problema pela primeira vez às 1h30 UTC do dia 30 de outubro. SerpApi, outro vendedor de dados de pesquisa, também registrou links de acesso para resultados orgânicos na mesma data. Nem o DataForSEO nem o Serper têm links para um anúncio do Google sobre a restrição e as declarações abaixo vêm de seus sites.
Como funciona o limite
DataForSEO declarou em seu artigo de 2 de novembro que quando você abre vários links da mesma página de resultados em rápida sucessão, o Google começará a limitar o(s) redirecionamento(s). Cada link carrega um identificador baseado na página de resultados de onde foi originado.
Quando o Google restringe seus redirecionamentos, em vez de enviar suas solicitações de resolução diretamente ao destino, o Google enviará de volta uma página com um botão “Continuar”. Esse botão só ficará disponível após um período de espera. A quantidade de tempo que o botão continuar fica desabilitado aumenta quanto mais rápido os links anteriores foram resolvidos.
Por exemplo, pegue uma página de resultados que contém 18 links para outros sites. Se todos os 18 links forem solicitados em rápida sucessão, o Google poderá permitir que os primeiros 5 a 6 sejam resolvidos imediatamente. Porém, o 7º link pode resultar em uma espera de 1 segundo antes de poder acessar o site. O 8º link pode levar 3 segundos. E esse processo continua até o 15º link, onde poderá haver uma espera de 40 segundos antes de acessar aquele site. DataForSEO relatou que houve casos de espera de até 120 segundos por 1 URL.
O limite é baseado na página de resultados e não no endereço IP ou na consulta de pesquisa usada. Além disso, DataForSEO relata que simplesmente trocar endereços IP ou consultas de pesquisa não ajudará a contornar essa limitação. Além disso, diz que mesmo que você espere uma hora ou mais antes de resolver todos os links, o Google ainda usa os mesmos limites de páginas de resultados.
O que os provedores de dados SERP estão fazendo
O modo de prioridade padrão do DataForSEO agora resolve todos os URLs goto, embora os atrasos adicionados possam significar que a execução demora mais. Nos modos Alta Prioridade e Ao Vivo, a empresa afirma que cerca de metade dos URLs de acesso são resolvidos.
A página de status do Serper diz que o Google “limita quantos links de resultados /goto podem ser seguidos por página de resultados”. Sua primeira correção resolveu os três principais links orgânicos e retornou os resultados de quatro a 10 como links goto, que Serper disse funcionarem cerca de 30 segundos após a pesquisa. Ele adicionou um endpoint /resolve para buscar o resto.
Em 31 de outubro, a Serper disse que havia encontrado outra maneira de obter os URLs reais e que todos os links de resultados os tinham novamente. Chamou isso de “provavelmente temporário”.
A página de status da SerpApi exibe um evento de 30 de outubro indicando que sua API de pesquisa do Google retornou links goto em vez de links regulares para resultados de pesquisa orgânica; afirma que o problema foi corrigido em 2 de novembro. No entanto, há um segundo incidente relatado em 3 de novembro, relatando problemas intermitentes com o mesmo problema. Nenhum dos incidentes fornece uma causa.
Como os links Goto chegaram aqui
DataForSEO data a mudança do Google para links www.google.com/goto nos resultados de pesquisa para o final de agosto. Diz que os links não podem ser decodificados e, portanto, uma ferramenta terá que seguir cada link para descobrir para onde ele vai. A parte de seguir o link é o que o novo limite retarda.
Por que isso é importante
Alguns serviços de rastreamento de classificação, bem como relatórios internos que usam páginas de destino para relatórios em nível de URL, podem exibir redirecionamentos goto do Google (google.com/goto) no lugar de URLs de destino verdadeiros a partir de aproximadamente 30 de outubro, com base no provedor de serviços e como as solicitações foram feitas. Se um URL específico estiver faltando em um relatório em nível de URL, ele ainda poderá aparecer em uma posição de classificação e ter um redirecionamento não resolvido no local do URL. Antes de relatar uma perda no nível do URL, verifique se o URL armazenado é um redirecionamento do Google, entre em contato também com seu provedor de serviços e determine qual método foi usado para coletar os dados.
Olhando para o futuro
Na minha verificação em 4 de novembro, o Relatório de Incidentes da SerpApi sobre links goto de 3 de novembro ainda está listado como Identificado. Serper afirma que, caso o Google também limite o método usado para recuperar URLs reais, ele voltaria a resolver automaticamente os três principais resultados e usaria /resolver para buscar os restantes após aproximadamente trinta segundos. DataForSEO afirmou que continuará ajustando seu processamento com base no que observa sobre como o Google lida com as resoluções goto.
Os relatórios que cobrem os últimos dias de outubro até o início de novembro devem ser revisados novamente em algum momento, quando os provedores determinarem como irão lidar com a resolução goto.
Imagem em destaque: Teodora ART/Shutterstock
