当遇到Hugging Face『gated dataset』错误时,需要完成三个操作:
- 登录Hugging Face账户,在Settings-Tokens页面创建访问令牌
- 在运行OpenBench的终端环境中设置令牌变量:
export HF_TOKEN='hf_xxxxxxx'
- 重新执行原评测命令。这个设计是因为部分基准测试(如某些数学竞赛数据集)涉及版权保护,Hugging Face要求用户显式同意使用条款。值得注意的是,该配置会随环境变量持久化,同会话中后续评测无需重复设置。
本答案来源于文章《OpenBench:一个用于评估语言模型的开源基准测试工具》