Search-R1的数据处理流程支持多种结构化输入格式

2025-08-27

1.2 K

Search-R1的数据工程能力

Search-R1设计了灵活且标准化的数据处理流程，支持开发者使用自定义数据集进行模型训练。系统定义了两种核心结构化数据格式：训练用的QA数据集格式和检索用的语料库格式。

项目内置了wiki-18等基准数据集处理流程，并详细说明了本地语料索引构建方法(build_index.sh)。这种设计既确保了对标准数据集的支持，又为领域适配保留了充足灵活性。