Anubisが検索エンジンのインデックスに影響を与える主な理由は、その保護メカニズムの未分化性である:
動作原理の制限
- 適合する検索エンジンのクローラーを含む、すべての自動化された訪問について完了すべき作業量の証明
- Googlebotのような検索エンジンのクローラーは、計算タスクを実行する能力を備えていない。
- これは意図的な設計上の特徴であり、技術的な欠陥ではない
処方
- 重要なSEOシナリオCloudflareのような検索エンジンを意識した代替手段の採用
- ハイブリッド展開機密性の高いルートでのみアヌビスを有効にする
- ホワイトリストの仕組み検索エンジンのIP解放ルールを追加するコードを自分で修正する。
- robots.txtの補足AIのクローラーには効果がないが、SEOには効果がある。
開発者は、アヌビスは以下のシナリオに適していると明言している:
- 社内システムまたは開発テスト環境
- 掲載したくない個人ウェブサイトを特定する
- ファイル共有など、正確なアクセス制御が必要なシナリオ
この答えは記事から得たものである。アヌビス:作業負荷の証明を通じてAIクローラーのクローリングを妨害するについて