Hugging Faceデータセットのダウンロード拒否に遭遇した場合、以下の解決策があります:
- Hugging Faceのアカウント設定ページにアクセスし、アクセストークンを生成する。
- OpenBench を実行するターミナルで環境変数を設定します:
export HF_TOKEN="你的令牌"
- コード空間やコンテナ環境では、トークンを
~/.bashrc
またはコンテナ構成 - 評価コマンドを再実行する前に
huggingface-cli login
トークンの有効性の確認 - GPQAのような大会レベルのデータセットを評価する場合、データセットへの追加アクセスを要求しなければならない。
チームコラボレーション中のパーミッションの統一的な取り扱いを容易にするため、トークン設定をプロジェクトドキュメントに含めることを推奨します。
この答えは記事から得たものである。OpenBench: 言語モデル評価のためのオープンソースベンチマークツールについて