Illyes do Google não tem certeza sobre a mudança de datas indisponíveis_após
Gary Illyes, do Google, disse no LinkedIn que teria que verificar se um site pode estender com segurança uma data indisponível após. Sua primeira leitura, que ele chamou de um pressentimento, foi que adiantar a data é bom, mas ele deixou em aberto se a tag pode ser confiável para páginas que expiram e depois são renovadas.
O que foi perguntado
O consultor de SEO Javier Lorente Murillo entrou em contato com a equipe de pesquisa do Google com uma pergunta sobre um site de classificados que tem um núcleo constante de cerca de 5.000 URLs indexados e adiciona aproximadamente 10.000 novas listagens a cada mês. A maioria dessas listagens permanece ativa por 24 a 72 horas.
Ele planejou usar unavailable_after em páginas de curta duração para evitar erros 404 e gerenciar o orçamento de rastreamento. Como os usuários podem renovar anúncios, seu sistema atualizaria dinamicamente a data de validade. Ele perguntou se o Googlebot começaria a ignorar uma data que muda constantemente a cada renovação.
O que Illyes disse
Illyes começou dizendo que não sabia:
“essa é uma ótima pergunta… não tenho ideia, tenho que verificar.”
Ele acrescentou:
“Meu pressentimento é que não há problema em adiar a data indisponível_depois, MAS você precisa ter em mente que precisaremos rastrear a página novamente para “ver” a nova data. Isso não tem implicações em nada além da seleção do índice, onde atua como um sinal de “você pode descartar isso agora”.
Em uma resposta posterior a outro comentário no mesmo post, ele disse que o Google iria buscar a página em vez de verificá-la de forma barata:
“Raramente vemos solicitações HEAD, então ainda baixaríamos o conteúdo.”
O que diz a documentação do Google
A documentação da meta tag robots do Google explica ‘indisponível_depois’ como uma regra que instrui o Google a não exibir uma página nos resultados de pesquisa após uma data e hora especificadas. A mesma página diz que o Googlebot rastreará esse URL com muito menos frequência após essa data.
A página também fala sobre o ponto de novo rastreamento mencionado por Illyes, destacando que as meta tags Robots e os cabeçalhos X-Robots-Tag são detectados quando um URL é rastreado. Isso significa que uma data alterada só aparecerá na próxima busca.
Essa parte de sua resposta ecoa o que o Google já afirma. A afirmação de que a regra não afeta nada além da seleção de índice é dele e não aparece nos documentos.
Por que isso é importante
Illyes não disse o que aconteceria se a última data que o Google viu passasse antes de voltar à página. Esse é o caso que ele disse que teria que verificar.
Com o caso de renovação sem resposta, não há nada para o Google planejar. O que decide o resultado é a frequência com que o Google rastreia a página, e o proprietário do site não pode controlar isso.
Olhando para o futuro
No momento da publicação, a documentação do Google não cobre uma data de validade que muda a cada renovação.
A primeira chamada é o que você está pedindo para a tag unavailable_after fazer. Permitir que uma página saia dos resultados de pesquisa após uma data definida é a razão pela qual o Google a documenta. Manter uma página viva enquanto se apoia na tag para gerenciar o rastreamento é o caso que ainda está em aberto.
Imagem em destaque: ESB Essentials/Shutterstock
