Há três ações que precisam ser concluídas quando o erro Hugging Face 『gated dataset』 é encontrado:
- Faça login em sua conta do Hugging Face emPágina Configurações-TokensCriação de tokens de acesso
- Defina a variável token no ambiente do terminal em que o OpenBench está sendo executado:
export HF_TOKEN='hf_xxxxxxx'
- Executar novamente o comando de revisão original. Esse design se deve ao fato de que alguns benchmarks (por exemplo, alguns conjuntos de dados de competições de matemática) envolvem proteção de direitos autorais e o Hugging Face exige que o usuário concorde explicitamente com os termos de uso. É importante observar que essa configuração é mantida com as variáveis de ambiente e não precisa ser repetida para avaliações subsequentes na mesma sessão.
Essa resposta foi extraída do artigoOpenBench: uma ferramenta de benchmarking de código aberto para avaliar modelos de linguagemO