shopify principal tempo de inatividade do arquivo robots.txt

Tenho dados que sugerem que o Shopify não veicula um arquivo robots.txt de forma consistente (se é que o faz) desde pelo menos 4 de janeiro (e parece que foi corrigido hoje, 5h GMT, 15 de janeiro).

A imagem acima mostra como 690,000 urls passaram de bloqueados a rastreáveis ​​no dia 4 de janeiro, e eu verifiquei esse problema hoje em vários arquivos de sites robots.txt, todos exibindo o código HTML para uma página 404 dentro do próprio arquivo em vez de as regras usuais do robots.txt.

Também há vários exemplos no GSC do último arquivo robots.txt registrado rastreado ocorrendo em 4 de janeiro

Definitivamente, deve-se tomar cuidado caso isso aconteça novamente / ainda não esteja totalmente corrigido - coloque outras tags no lugar como uma proteção.

Um exemplo de como isso pode levar a grandes problemas de indexação:

Uma loja que não configurou suas páginas de filtro para noindex, agora de repente tem combinações de filtros indexáveis ​​(anteriormente bloqueadas pelo “+” no arquivo robots.txt), o que poderia aumentar exponencialmente o número de páginas indexáveis.

Aqui está uma imagem mostrando o que foi mostrado ao Google no arquivo robots.txt (o HTML da página 404):

exemplo de robôs do shopify txt 404

Gostaria de saber se mais alguém vê essas grandes quedas nas páginas bloqueadas no GSC (verifiquei cerca de 10 até agora e quase todas têm quedas semelhantes).

Quão útil foi esta postagem?

Clique em uma estrela para avaliá-la!

Classificação média 5 / 5. Contagem de votos: 3

Nenhum voto até agora! Seja o primeiro a avaliar esta postagem.

Lamentamos que este post não tenha sido útil para você!

Vamos melhorar este post!

Diga-nos como podemos melhorar esta postagem?

Matt Jackson

Especialista em Ecommerce SEO, com mais de 8 anos de experiência em tempo integral na análise e correção de sites de compras online. Experiência prática com Shopify, Wordpress, Opencart, Magento e outros CMS.
Preciso de ajuda? Envie-me para mais informações, em info@matt-jackson.com

Este item é 0 Postar comentários

Deixe um comentário

Seu endereço de email não será publicado. Campos obrigatórios são marcados com *