当遇到Hugging Face数据集下载被拒时,可通过以下方案解决:
- 访问Hugging Face账户设置页面生成访问令牌(Access Token)
- 在运行OpenBench的终端设置环境变量:
export HF_TOKEN="你的令牌"
- 对于代码空间或容器环境,建议将令牌写入
~/.bashrc
或容器配置 - 重新运行评估命令前,可使用
huggingface-cli login
验证令牌有效性 - 如评估GPQA等竞赛级数据集,需额外申请数据集使用权限
建议将令牌配置纳入项目文档,便于团队协作时统一处理权限问题。
本答案来源于文章《OpenBench:一个用于评估语言模型的开源基准测试工具》