O principal motivo pelo qual o Anubis afeta a indexação dos mecanismos de busca é a natureza indiferenciada de seu mecanismo de proteção:
Limitações do princípio operacional
- Prova de carga de trabalho a ser preenchida para todas as visitas automatizadas, incluindo rastreadores de mecanismos de pesquisa em conformidade
- Os rastreadores de mecanismos de pesquisa, como o Googlebot, não estão equipados para executar tarefas computacionais
- Esse é um recurso de design intencional, não uma falha técnica
prescrição
- Cenários importantes de SEOAdoção de alternativas com reconhecimento de mecanismos de pesquisa, como o Cloudflare
- implantação híbridaAtivar o Anubis somente em rotas confidenciais
- Mecanismo de lista brancaModifique o código para adicionar a regra de liberação de IP do mecanismo de pesquisa por conta própria
- Suplemento ao robots.txtEmbora não seja eficaz contra rastreadores de IA, ele pode ajudar no SEO
Os desenvolvedores deixam claro que o Anubis é mais adequado para os seguintes cenários:
- Sistemas internos ou ambientes de teste de desenvolvimento
- Identificar sites pessoais que você não deseja que sejam incluídos
- Cenários que exigem controle de acesso preciso, como compartilhamento de arquivos
Essa resposta foi extraída do artigoAnubis: interferindo no rastreamento do rastreador de IA por meio de provas de cargas de trabalhoO